爬蟲(chóng)是一個(gè)是一個(gè)好玩的技術(shù)，偷偷爬取mm的照片，爬取知乎用戶(hù)頭像等等，這些教程經(jīng)驗帖在網(wǎng)上隨便一搜，到處都是;那么今天小編將給大家簡(jiǎn)單講講python爬蟲(chóng)的入門(mén)。以下是小編為你整理的python學(xué)習怎么學(xué) ?

步驟一：python的下載 ?

python爬蟲(chóng)，首先需要本地電腦上安裝有python，這里我簡(jiǎn)單說(shuō)一下python的安裝，我相信學(xué)爬蟲(chóng)的同學(xué)們肯定有一定的python基礎了。 ?

首先，進(jìn)入到python官網(wǎng)，你可以直接輸入python主頁(yè)，也可以從百度搜索框進(jìn)入到python的主頁(yè)，這里方法很多，我不在一一例舉了，然后在主頁(yè)上面可以看見(jiàn)Downloads字樣，點(diǎn)擊下載，然后跳轉出下載界面。

跳轉出python下載界面，選擇一個(gè)版本進(jìn)行下載，這里的我3.X和2.7.X版本的差別還是蠻大的，這里我就不在累贅了，python2.7的支持包要更加全面完善，python3的包擴展可能比較少，但是正在慢慢開(kāi)發(fā);python2.7預計在202X停止更新了;但是由于小編的習慣，這里我選擇的是2.7版本。 ?

安裝好后，按windos鍵加R鍵，彈出運行窗口，在運行窗口輸入cms進(jìn)入到命令行界面，然后輸入python，如果安裝成功，即可進(jìn)入到python交互界面，如果沒(méi)有則表示python沒(méi)有安裝成功。 ?

如何讓輸出不換行輸出

程序中如何讓輸出不換行輸出，例如如何使用range輸出1,2,3,4,5,使他們在同一行上，其實(shí)很簡(jiǎn)單，只要在print語(yǔ)句后面加一個(gè)逗號 ?

程序中怎樣換行，而不影響輸出結果。(一般用于語(yǔ)句過(guò)長(cháng)時(shí))可以用分開(kāi)語(yǔ)句。 ?

\表示字符串中的\n表示字符串中的換行 ?

'表示單引號，"表示雙引號 ?

程序中"""很厲害，兩個(gè)"""中可以有'和",并且不會(huì )影響輸出結果，可以將'和"輸出。(python中'和"的用法完全一樣，也就是說(shuō)這里的三引號也可以是''') ?

*說(shuō)一下在程序中怎么輸出5排*****，這里使用兩個(gè)for 循環(huán)嵌套，這個(gè)肯定不用說(shuō)了，我想提的是怎么每輸出5個(gè)*就換行，其實(shí)就是讓第二個(gè)print的縮進(jìn)和內層的for是一樣的，這表明它是外層for循環(huán)中的語(yǔ)句，每次i的循環(huán)中，它會(huì )執行一次。第二個(gè)print后面沒(méi)有寫(xiě)任何東西，是起到換行的作用，這樣，每輸出5個(gè)*，就會(huì )換行。 ?

python的作用

【階段一】Python編程 ?

Python基礎 ?

Python概述 Python簡(jiǎn)史 、Python應用場(chǎng)景 、Python當前發(fā)展 ?

語(yǔ)法基礎 變量類(lèi)型 、 分支語(yǔ)句 、 循環(huán)語(yǔ)句 ?

函數 函數初步 、 細說(shuō)參數 、 變量作用域 、 遞歸調用 ?

面向對象編程(OOP) OOP基礎 、 公有私有問(wèn)題 、 繼承 、 組合& Mixin ?

數據結構初步 列表(list) 、 元組(tuple) 、 字典(dict) 、 集合(set) ?

異常處理 異常概述 、 try/except 、 Finally 、 Raise 、 with ?

擴展課程 Linux系統運維 、 Python圖形界面(GUI)開(kāi)發(fā) 、 (qt或者tkinter任選) ?

階段貫穿項目：計算器 隨機抽獎 壓縮軟件 猜數字 ?

【階段二】Python高級特性 ?

Python高級特性 ?

Python模塊 模塊基本使用 、 搜索路徑問(wèn)題 、 DIY自己的模塊 ?

調試技術(shù) 調試技術(shù)簡(jiǎn)介 、 Pdb調試 、 Pycharm中的調試 ?

魔法函數 魔法函數概述 、 構造類(lèi)魔法函數 、 運算類(lèi)魔法函數 ?

多線(xiàn)程 多線(xiàn)程/進(jìn)程簡(jiǎn)介 、 Python的多線(xiàn)程 ?

Net編程 Socket編程 、 Urllib庫 、 Requests庫 、 Mail處理 ?

序列化 文件(file)處理 、 XML編程 、 Pickle模塊 ?

其他常用模塊 commands 、 sys 模塊 、 os模塊 、 time 、 random ?

擴展課程 Pygame 、 微信公眾號開(kāi)發(fā)-API使用 、 Shelve模塊 、 JSON格式 、 多線(xiàn)程-協(xié)程，gevent ?

階段課程項目：飛機大戰(OOP,GUI) WebServer模擬(HTTP協(xié)議) 自動(dòng)郵件發(fā)送軟件(Net編程) 聊天室(Net編程) ?

【階段三】軟件核心算法&全棧 ?

軟件核心算法&全棧 ?

核心算法 代碼規范 、 數據結構 、 設計模式 、 版本控制 ?

數據庫 數據庫簡(jiǎn)介 、 Mysql 、 MongoDB 、 Redis ?

前端技術(shù) HTML+CSS 、 Javascript 、 Ajax 、 jQuery ?

擴展課程 Memcached 、 Bootstrap 、 其他常見(jiàn)設計模式 ?

階段課程項目：商城界面模擬 ?

【階段四】WEB框架 ?

WEB框架 ?

Django Django的路由模塊 、 Django中的View 、 ORM在django中的應用 、 模板系統介紹 、 Django常用安全控制 ?

Tornado Tornado的路由 、 Tornado使用的模板系統 、 Views模塊 、 Tornado對數據庫的支持 、 Tornado的異步處理 ?

擴展課程 Flask框架 、 RESTful開(kāi)發(fā) 、 Celery使用 ?

AJAX ?

Ajax AJAX簡(jiǎn)介、XMLHttpRequest對象詳解、JQuery的AJAX、Ajax處理服務(wù)端返回的文本、XML和JSON格式的數據 ?

WEB高級 ?

Web強化 MD5加密、分頁(yè)、文件上傳、下載、動(dòng)態(tài)代理 ?

項目管理 ?

SVN&Maven 掌握SVN的配置和使用，Maven介紹及依賴(lài)管理;安裝配置;核心概念、與第三方Eclipse的整合、Maven管理Web應用;Maven管理SSH應用;使用Maven進(jìn)行測試及集成;掌握Maven在Java Web應用的配置、管理和使用等技術(shù)。 ?

階段貫穿項目：在線(xiàn)商城 開(kāi)源在線(xiàn)服務(wù)系統 Tornado Web后臺處理 ?

?

【階段五】大數據&人工智能 ?

大數據&人工智能 ?

爬蟲(chóng) 爬蟲(chóng)原理 、 Urllib爬取技術(shù) 、 Requests爬取技術(shù) 、 Scrapy框架 ?

大數據 數據科學(xué)簡(jiǎn)介 、 數據操作工具使用 、 數據呈現工具使用 、 基本數據分析算法 ?

人工智能(AI) 人工智能簡(jiǎn)介 、 Tensoflow使用 、 AI算法 ?

階段貫穿項目： 知識圖譜繪制(某創(chuàng )業(yè)項目)、跨境電商BI數據分析 ?

畢業(yè)項目：元器件識別系統、爬蟲(chóng)爬取互聯(lián)網(wǎng)數據、手寫(xiě)筆跡識別 ?

如何發(fā)起爬蟲(chóng)請求

大家知道，爬蟲(chóng)實(shí)際上就是模擬瀏覽器請求，然后把請求到的數據，經(jīng)過(guò)我們的分析，提取出我們想要的內容，這也就是爬蟲(chóng)的實(shí)現 ?

首先，我們要寫(xiě)爬蟲(chóng)，可以借鑒一些工具，我們先從簡(jiǎn)單的入門(mén)，首先說(shuō)到請求，我們就會(huì )想到python中，非常好用的requests，然后說(shuō)到分析解析就會(huì )用到bs4，然后我們可以直接用pip命令來(lái)實(shí)現安裝，假如安裝的是python3，也可以用pip3 ?

安裝好這兩個(gè)類(lèi)庫之后，然后我們就可以先請求數據，查看下新聞的內容，這個(gè)時(shí)候我們有可能看到的是亂碼 ?

怎么處理亂碼呢?我們可以拿瀏覽器打開(kāi)網(wǎng)頁(yè)，右鍵查看網(wǎng)頁(yè)源代碼，我們可以看到編碼格式為utf-8 ?

然后我們在輸出的時(shí)候添加編碼格式，就可以查看到正確編碼的數據了 ?

拿到數據之后，我們需要先分析數據，看我們想要的數據在哪里，我們打開(kāi)瀏覽器，右鍵審查，然后按示例圖操作，就可以看到我們新聞所在的標簽，假如是windows系統，選擇開(kāi)發(fā)中工具里面一樣