'從Python安裝到語法基礎，小白都能懂的爬蟲教程！（附學習教程）'

本文立足基礎，講解Python和PyCharm的安裝，及Python最簡單的語法基礎和爬蟲技術中所需的Python語法。

01 Python與PyCharm安裝

“工欲善其事，必先利其器”，本節介紹Python環境的安裝和Python的集成開發環境（IDE）PyCharm的安裝。

1. Python安裝（Windows、Mac和Linux）

當前主流的Python版本為2.x和3.x。由於Python 2第三方庫更多（很多庫沒有向Python 3轉移），企業普遍使用Python 2。如果作為學習和研究的話，建議使用Python 3，因為它是未來的發展方向。所以本教程選擇Python 3的環境。

1.1 Windows中安裝Python 3

在Windows系統中安裝Python 3，請參照下面的步驟進行。

打開瀏覽器，訪問Python官網（https://www.python.org/）。

光標移動至Downloads鏈接，單擊Windows鏈接。

根據自己的Windows版本（32位或64位），下載相應的Python 3.5版本，如為Windows 32位系統，應下載Windows x86 executable installer，如果為Windows 64位系統，應下載Windows x86-64 executable installer。

單擊運行文件，勾選Add Python 3.5 to PATH，然後單擊Install Now按鈕即可完成安裝。

在計算機中打開命令提示符（cmd）窗口，輸入python，如圖1.1所示，說明Python環境安裝成功。

圖1.1 運行Python環境

當界面出現提示符>>>時，就表明進入了Python交互式環境，輸入代碼後按Enter鍵即可運行Python代碼，通過輸入exit()並按Enter鍵，就可以退出Python交互式環境。

注意：如果出現錯誤，可能是因為安裝時未勾選Add Python3.5 to PATH選項，此時卸載Python後重新安裝時勾選Add Python3.5 to PATH選項即可。

1.2 Mac中安裝Python3

Mac系統中自帶了Python 2.7，需到Python官網上下載並安裝Python3.5。Mac系統中的安裝比Windows更為簡單，一直單擊“下一步”按鈕即可完成。安裝完後，打開終端並輸入Python3，即可進入Mac的Python3的交互式環境。

1.3 Linux中安裝Python3

大部分Linux系統內置了Python2和Python3，通過在終端輸入python–version，可以查看當前Python3的版本。如果需要安裝某個特定版本的Python，可以在終端中輸入：

sudo apt-get install python3.5

2. PyCharm安裝

安裝好Python環境後，還需要安裝一個集成開發環境（IDE），IDE集成了代碼編寫功能、分析功能、編譯功能和調試功能。在這裡向讀者推薦一個最智能、好用的Python IDE，叫做PyCharm。進入PyCharm的官網，下載社區版即可：

http://www.jetbrains.com/pycharm/

由於PyCharm上手極為簡單，因此就不詳細講解PyCharm的使用方法了。以下講解如何使用PyCharm關聯Python解釋器，讓PyCharm可以運行Python代碼。

打開PyCharm，在菜單欄中選擇File ∣ Defalut Settings命令。

在彈出的對話框中選擇Project Interpreter，然後在右邊選擇Python環境，這裡選擇Python 3.5，單擊OK按鈕，即可關聯Python解釋器，如圖1.2所示。

圖1.2 關聯Python解釋器

02 變量和字符串

本節主要介紹Python變量的概念、字符串的基本使用方法、字符串的切片和索引，以及字符串的幾種常用方法。

1. 變量

Python中的變很好理解，例如：

a = 1

這種操作稱為賦值，意思為將數值1賦給了變量a。

注意：Python中語句結束不需要以分號結束，變量不需要提前定義。

現在有變量a和變量b，可以通過下面代碼進行變量a、b值的對換。

這種方法類似於將兩個杯子中的飲料對換，只需要多加一個杯子，即可完成飲料的對換工作。

2. 字符串的“加法”和“乘法”

由於Python爬蟲的對象大部分為文本，所以字符串的用法尤為重要。在Python中，字符串由雙引號或單引號和引號中的字符組成。首先，通過下面代碼看看字符串的“加法”：

在爬蟲代碼中，會經常構造URL，例如，在爬取一個網頁鏈接時，只有一部分/u/9104ebf5e177，這部分鏈接是無法訪問的，還需要http://www.jianshu.com，這時可以通過字符串的“加法”進行合併。

注意：此網站為筆者的簡書首頁。

Python的字符串不僅可以相加，也可以乘以一個數字：

字符串乘以一個數字，意思就是將字符串複製這個數字的份數。

3. 字符串的切片和索引

字符串的切片和索引就是通過string[x]，獲取字符串的一部分信息：

通過圖1.3就能清楚地理解字符串的切片和索引。

圖1.3 字符串切片和索引

注意：a[0:5]中的第5個是不會選擇的。

在爬蟲實戰中，經常會通過字符串的切片和索引，提取需要的部分，剔除一些不需要的部分。

4. 字符串方法

Python作為面向對象的語言，每個對象都有相應的方法，字符串也一樣，擁有多種方法，在這裡介紹爬蟲技術中常用的幾種方法。

4.1 split()方法

字符串的split()方法就是通過給定的分隔符（在這裡為‘.’），將一個字符串分割為一個列表（後面將詳細講解列表）。

注意：如果沒有提供任何分隔符，程序會把所有的空格作為分隔符（空格、製表、換行等）。

4.2 repalce()方法

這種方法類似文本中的“查找和替換”功能。

4.3 strip()方法

strip()方法返回去除兩側（不包括內部）空格的字符串，也可以指定需要去除的字符，將它們列為參數中即可。

這個方法只能去除兩側的字符，在爬蟲得到的文本中，文本兩側常會有多餘的空格，只需使用字符串的strip()方法即可去除多餘的空格部分。

4.4 format()方法

最後，再講解下好用的字符串格式化符，首先看以下代碼：

字符串格式化符就像是做選擇題，留了空給做題者選擇。在爬蟲過程中，有些網頁鏈接的部分參數是可變的，這時使用字符串格式化符可以減少代碼的使用量。

例如，Pexels素材網（https://www.pexels.com/），當搜索圖片時，網頁鏈接也會發生變化。

如在搜索欄中輸入book，網頁跳轉為https://www.pexels.com/search/book/，可以設計如下代碼，筆者只需輸入搜索內容，便可返回網頁鏈接。

運行程序並輸入book，便可返回網頁鏈接，單擊網頁鏈接便可訪問網頁了，如圖1.4所示。

圖1.4 字符串格式化符演示

03 函數與控制語句

本節主要介紹Python()函數的定義與使用方法，介紹Python的判斷和循環兩種爬蟲技術中常用的控制語句。

1. 函數

“髒活累活交給函數來做”，首先，看看Python中定義函數的方法。

製作一個輸入直角邊就能計算出直角三角形的面積函數：

注意：讀者不需要太糾結二者的區別，用return是返回一個值，而第二個是調用函數執行打印功能。

通過輸入function(2,3)，便可以調用函數，計算直角邊為2和3的直角三角形的面積。現在來做一個綜合練習：讀者都知道網上公佈的電話號碼，如156****9354，中間的數值用其他符號代替了，而用戶輸入手機號時卻是完整地輸入，下面就通過Python()函數來實現這種轉換功能。

注意：這裡的手機號碼是隨意輸入的，不是真實的號碼。

代碼說明如下：

定義了一個名為change_number的函數。

對輸入的參數進行切片，把參數的[3:7]部分替換為‘*’號，並打印出來。

調用函數。

2. 判斷語句

在爬蟲實戰中也會經常使用判斷語句，Python的判斷語句格式如下：

在平時使用密碼時，輸入的密碼正確即可登錄，密碼錯誤時就需要再次輸入密碼。

程序說明如下：

運行程序，輸入密碼後按Enter鍵。

如果輸入的字符串為12345，則打印“輸入成功！”，程序結束。

如果輸入的字符串不是12345，則打印“錯誤，再輸入”，繼續運行程序，直到輸入正確為止。

讀者也可以將程序設計得更為有趣，例如，“3次輸入失敗後，退出程序”等。

3. 循環語句

Python的循環語句包括for循環和while循環，代碼如下：

例如，設計一個小程序，計算1～100的和：

04 Python數據結構

數據結構是存放數據的容器，本節主要講解Python的4種基本數據結構，即列表、字典、元組和集合。

1. 列表

在爬蟲實戰中，使用最多的就是列表數據結構，不論是構造出的多個URL，還是爬取到的數據，大多數都為列表數據結構。下面首先介紹列表最顯著的特徵：

列表中的每一個元素都是可變的。

列表的元素都是有序的，也就是說每個元素都有對應的位置（類似字符串的切片和索引）。

列表可以容納所有的對象。

列表中的每個元素都是可變的，這意味著可以對列表進行增、刪、改操作，這些操作在爬蟲中很少使用，因此這裡不再給讀者添加知識負擔。

列表的每個元素都有對應的位置，這種用法與字符串的切片和索引很相似。

如果為切片，返回的也是列表的數據結構。

列表可以容納所有的對象：

列表中會經常用到多重循環，因此讀者有必要去了解和使用多重循環。現在，擺在讀者面前有兩個列表，分別是姓名和年齡的列表：

這時可以通過多重循環讓name和age同時打印在屏幕上：

注意：多重循環前後變量要一致。

在爬蟲中，經常請求多個網頁，通常情況下會把網頁存到列表中，然後循環依次取出並訪問爬取數據。這些網頁都有一定的規律，如果是手動將這些網頁URL存入到列表中，不僅花費太多時間，也會造成代碼冗餘。這時可通過列表推導式，構造出這樣的列表，例如某個網站每頁的URL是這樣的（一共13頁）：

http://bj.xiaozhu.com/search-duanzufang-p1-0/

http://bj.xiaozhu.com/search-duanzufang-p2-0/

http://bj.xiaozhu.com/search-duanzufang-p3-0/

http://bj.xiaozhu.com/search-duanzufang-p4-0/

……

通過以下代碼即可構造出13頁URL的列表數據：

通過一行代碼即可構造出來，通過for循環打印出每個URL，如圖1.5所示。

圖1.5 列表推導式構造URL列表

注意：本網站為小豬短租網。

2. 字典

Python的字典數據結構與現實中的字典類似，以鍵值對（'key'-'value'）的形式表現出來。本文中只講解字典的創造，字典的操作在後面會詳細介紹。字典的格式如下：

注意：插入MongoDB數據庫需用字典結構。

3. 元組和集合

在爬蟲中，元組和集合很少用到，因此這裡只做簡單介紹。元組類似於列表，但是元組的元素不能修改只能查看，元組的格式如下：

tuple = (1,2,3)

集合的概念類似數學中的集合。每個集合中的元素是無序的，不可以有重複的對象，因此可以通過集合把重複的數據去除。

注意：集合是用大括號構建的。

05 Python文件操作

在爬蟲初期的工作中，常常會把數據存儲到文件中。本節主要講解Python如何打開文件和讀寫數據。

1. 打開文件

Python中通過open()函數打開文件，語法如下：

open(name[, mode[, buffering]])

open()函數使用文件名作為唯一的強制參數，然後返回一個文件對象。模式（mode）和緩衝（buffering）是可選參數。在Python的文件操作中，mode參數的輸入是有必要的，而buffering使用較少。

如果在本機上有名為file.txt的文件（讀者可以在本機中新建一個文本文件），其存儲路徑為C:\\Users\\Administrator\\Desktop，那麼可以通過下面代碼打開文件：

f = open('C:/Users/Administrator/Desktop/file.txt')

注意：此代碼為Windows系統下的路徑寫法。

如果文件不存在，則會出現如圖1.6所示的錯誤。

圖1.6 文件不存在報錯信息

如果open()函數只是加入文件的路徑這一個參數，則只能打開文件並讀取文件的相關內容。如果要向文件中寫入內容，則必須加入模式這個參數了。下面首先來看看open()函數中模式參數的常用值，如表1.1所示。

表1.1 open()函數中模式參數的常用值

2. 讀寫文件

上一節中有了名為f的類文件對象，那麼就可以通過f.write()方法和f.read()方法寫入和讀取數據了。

f = open('C:/Users/Administrator/Desktop/file.txt','w+')

f.write('hello world')

這時，在本機上打開file.txt文件，可以看到如圖1.7所示的結果。

圖1.7 Python寫文件

注意：如果沒有建立文件，運行上面代碼也可以成功。

如果再次運行程序，txt文件中的內容不會繼續添加，可以修改模式參數為'r+'，便可一直寫入文件。

Python讀取文件通過read()方法，下面嘗試把f的類文件對象寫入的數據讀取出來，使用如下代碼即可完成操作：

3. 關閉文件

當完成讀寫工作後，應該牢記使用close()方法關閉文件。這樣可以保證Python進行緩衝的清理（出於效率考慮而把數據臨時存儲在內存中）和文件的安全性。通過下面代碼即可關閉文件。

06 Python面向對象

Python作為一個面向對象的語言，很容易創建一個類和對象。本節主要講解類的定義及其相關使用方法。

1. 定義類

類是用來描述具有相同屬性和方法的對象集合。人可以通過不同的膚色劃分為不同的種族，食物也有不同的種類，商品也是形形色色。但劃分為同一類的物體，肯定具有相似的特徵和行為方式。

對於同一款自行車而言，它們的組成結構都是一樣的，如車架、車輪和腳踏板等。通過Python可以定義這個自行車的類：

class Bike:

compose = ['frame','wheel','pedal']

通過使用class定義一個自行車的類，類中的變量compose稱為類的變量，專業術語為類的屬性。這樣，顧客購買的自行車組成結構就是一樣的了。

my_bike = Bike()

結果如圖1.8所示。

圖1.8 類屬性引用

在左邊寫上變量名，右邊寫上類的名稱，這個過程稱之為類的實例化，而my_bike就是類的實例。通過“.”加上類的屬性，就是類屬性的引用。類的屬性會被類的實例共享，所以結果都是一樣的。

2. 實例屬性

對於同一款自行車來說，有些顧客買回去後會改造下，如加一個車筐可以放東西等。

結果如圖1.9所示。

▲圖1.9 實例屬性

說明：通過給類的實例屬性進行賦值，也就是實例屬性。compose屬性屬於所有的該款自行車，而other屬性只屬於my_bike這個類的實例。

3. 實例方法

讀者是否還記得字符串的format()方法。方法就是函數，方法是對實例進行使用的，所以又叫實例方法。對於自行車而言，它的方法就是騎行。

結果如圖1.10所示。

圖1.10 實例方法

注意：這裡的self參數就是實例本身。

和函數一樣，實例方法也是可以有參數的。

結果如圖1.11所示。

"

本文立足基礎，講解Python和PyCharm的安裝，及Python最簡單的語法基礎和爬蟲技術中所需的Python語法。

01 Python與PyCharm安裝

“工欲善其事，必先利其器”，本節介紹Python環境的安裝和Python的集成開發環境（IDE）PyCharm的安裝。

1. Python安裝（Windows、Mac和Linux）

當前主流的Python版本為2.x和3.x。由於Python 2第三方庫更多（很多庫沒有向Python 3轉移），企業普遍使用Python 2。如果作為學習和研究的話，建議使用Python 3，因為它是未來的發展方向。所以本教程選擇Python 3的環境。

1.1 Windows中安裝Python 3

在Windows系統中安裝Python 3，請參照下面的步驟進行。

打開瀏覽器，訪問Python官網（https://www.python.org/）。

光標移動至Downloads鏈接，單擊Windows鏈接。

根據自己的Windows版本（32位或64位），下載相應的Python 3.5版本，如為Windows 32位系統，應下載Windows x86 executable installer，如果為Windows 64位系統，應下載Windows x86-64 executable installer。

單擊運行文件，勾選Add Python 3.5 to PATH，然後單擊Install Now按鈕即可完成安裝。

在計算機中打開命令提示符（cmd）窗口，輸入python，如圖1.1所示，說明Python環境安裝成功。

圖1.1 運行Python環境

當界面出現提示符>>>時，就表明進入了Python交互式環境，輸入代碼後按Enter鍵即可運行Python代碼，通過輸入exit()並按Enter鍵，就可以退出Python交互式環境。

注意：如果出現錯誤，可能是因為安裝時未勾選Add Python3.5 to PATH選項，此時卸載Python後重新安裝時勾選Add Python3.5 to PATH選項即可。

1.2 Mac中安裝Python3

Mac系統中自帶了Python 2.7，需到Python官網上下載並安裝Python3.5。Mac系統中的安裝比Windows更為簡單，一直單擊“下一步”按鈕即可完成。安裝完後，打開終端並輸入Python3，即可進入Mac的Python3的交互式環境。

1.3 Linux中安裝Python3

大部分Linux系統內置了Python2和Python3，通過在終端輸入python–version，可以查看當前Python3的版本。如果需要安裝某個特定版本的Python，可以在終端中輸入：

sudo apt-get install python3.5

2. PyCharm安裝

安裝好Python環境後，還需要安裝一個集成開發環境（IDE），IDE集成了代碼編寫功能、分析功能、編譯功能和調試功能。在這裡向讀者推薦一個最智能、好用的Python IDE，叫做PyCharm。進入PyCharm的官網，下載社區版即可：

http://www.jetbrains.com/pycharm/

由於PyCharm上手極為簡單，因此就不詳細講解PyCharm的使用方法了。以下講解如何使用PyCharm關聯Python解釋器，讓PyCharm可以運行Python代碼。

打開PyCharm，在菜單欄中選擇File ∣ Defalut Settings命令。

在彈出的對話框中選擇Project Interpreter，然後在右邊選擇Python環境，這裡選擇Python 3.5，單擊OK按鈕，即可關聯Python解釋器，如圖1.2所示。

圖1.2 關聯Python解釋器

02 變量和字符串

本節主要介紹Python變量的概念、字符串的基本使用方法、字符串的切片和索引，以及字符串的幾種常用方法。

1. 變量

Python中的變很好理解，例如：

a = 1

這種操作稱為賦值，意思為將數值1賦給了變量a。

注意：Python中語句結束不需要以分號結束，變量不需要提前定義。

現在有變量a和變量b，可以通過下面代碼進行變量a、b值的對換。

這種方法類似於將兩個杯子中的飲料對換，只需要多加一個杯子，即可完成飲料的對換工作。

2. 字符串的“加法”和“乘法”

由於Python爬蟲的對象大部分為文本，所以字符串的用法尤為重要。在Python中，字符串由雙引號或單引號和引號中的字符組成。首先，通過下面代碼看看字符串的“加法”：

在爬蟲代碼中，會經常構造URL，例如，在爬取一個網頁鏈接時，只有一部分/u/9104ebf5e177，這部分鏈接是無法訪問的，還需要http://www.jianshu.com，這時可以通過字符串的“加法”進行合併。

注意：此網站為筆者的簡書首頁。

Python的字符串不僅可以相加，也可以乘以一個數字：

字符串乘以一個數字，意思就是將字符串複製這個數字的份數。

3. 字符串的切片和索引

字符串的切片和索引就是通過string[x]，獲取字符串的一部分信息：

通過圖1.3就能清楚地理解字符串的切片和索引。

圖1.3 字符串切片和索引

注意：a[0:5]中的第5個是不會選擇的。

在爬蟲實戰中，經常會通過字符串的切片和索引，提取需要的部分，剔除一些不需要的部分。

4. 字符串方法

Python作為面向對象的語言，每個對象都有相應的方法，字符串也一樣，擁有多種方法，在這裡介紹爬蟲技術中常用的幾種方法。

4.1 split()方法

字符串的split()方法就是通過給定的分隔符（在這裡為‘.’），將一個字符串分割為一個列表（後面將詳細講解列表）。

注意：如果沒有提供任何分隔符，程序會把所有的空格作為分隔符（空格、製表、換行等）。

4.2 repalce()方法

這種方法類似文本中的“查找和替換”功能。

4.3 strip()方法

strip()方法返回去除兩側（不包括內部）空格的字符串，也可以指定需要去除的字符，將它們列為參數中即可。

這個方法只能去除兩側的字符，在爬蟲得到的文本中，文本兩側常會有多餘的空格，只需使用字符串的strip()方法即可去除多餘的空格部分。

4.4 format()方法

最後，再講解下好用的字符串格式化符，首先看以下代碼：

字符串格式化符就像是做選擇題，留了空給做題者選擇。在爬蟲過程中，有些網頁鏈接的部分參數是可變的，這時使用字符串格式化符可以減少代碼的使用量。

例如，Pexels素材網（https://www.pexels.com/），當搜索圖片時，網頁鏈接也會發生變化。

如在搜索欄中輸入book，網頁跳轉為https://www.pexels.com/search/book/，可以設計如下代碼，筆者只需輸入搜索內容，便可返回網頁鏈接。

運行程序並輸入book，便可返回網頁鏈接，單擊網頁鏈接便可訪問網頁了，如圖1.4所示。

圖1.4 字符串格式化符演示

03 函數與控制語句

本節主要介紹Python()函數的定義與使用方法，介紹Python的判斷和循環兩種爬蟲技術中常用的控制語句。

1. 函數

“髒活累活交給函數來做”，首先，看看Python中定義函數的方法。

製作一個輸入直角邊就能計算出直角三角形的面積函數：

注意：讀者不需要太糾結二者的區別，用return是返回一個值，而第二個是調用函數執行打印功能。

通過輸入function(2,3)，便可以調用函數，計算直角邊為2和3的直角三角形的面積。現在來做一個綜合練習：讀者都知道網上公佈的電話號碼，如156****9354，中間的數值用其他符號代替了，而用戶輸入手機號時卻是完整地輸入，下面就通過Python()函數來實現這種轉換功能。

注意：這裡的手機號碼是隨意輸入的，不是真實的號碼。

代碼說明如下：

定義了一個名為change_number的函數。

對輸入的參數進行切片，把參數的[3:7]部分替換為‘*’號，並打印出來。

調用函數。

2. 判斷語句

在爬蟲實戰中也會經常使用判斷語句，Python的判斷語句格式如下：

在平時使用密碼時，輸入的密碼正確即可登錄，密碼錯誤時就需要再次輸入密碼。

程序說明如下：

運行程序，輸入密碼後按Enter鍵。

如果輸入的字符串為12345，則打印“輸入成功！”，程序結束。

如果輸入的字符串不是12345，則打印“錯誤，再輸入”，繼續運行程序，直到輸入正確為止。

讀者也可以將程序設計得更為有趣，例如，“3次輸入失敗後，退出程序”等。

3. 循環語句

Python的循環語句包括for循環和while循環，代碼如下：

例如，設計一個小程序，計算1～100的和：

04 Python數據結構

數據結構是存放數據的容器，本節主要講解Python的4種基本數據結構，即列表、字典、元組和集合。

1. 列表

在爬蟲實戰中，使用最多的就是列表數據結構，不論是構造出的多個URL，還是爬取到的數據，大多數都為列表數據結構。下面首先介紹列表最顯著的特徵：

列表中的每一個元素都是可變的。

列表的元素都是有序的，也就是說每個元素都有對應的位置（類似字符串的切片和索引）。

列表可以容納所有的對象。

列表中的每個元素都是可變的，這意味著可以對列表進行增、刪、改操作，這些操作在爬蟲中很少使用，因此這裡不再給讀者添加知識負擔。

列表的每個元素都有對應的位置，這種用法與字符串的切片和索引很相似。

如果為切片，返回的也是列表的數據結構。

列表可以容納所有的對象：

列表中會經常用到多重循環，因此讀者有必要去了解和使用多重循環。現在，擺在讀者面前有兩個列表，分別是姓名和年齡的列表：

這時可以通過多重循環讓name和age同時打印在屏幕上：

注意：多重循環前後變量要一致。

在爬蟲中，經常請求多個網頁，通常情況下會把網頁存到列表中，然後循環依次取出並訪問爬取數據。這些網頁都有一定的規律，如果是手動將這些網頁URL存入到列表中，不僅花費太多時間，也會造成代碼冗餘。這時可通過列表推導式，構造出這樣的列表，例如某個網站每頁的URL是這樣的（一共13頁）：

http://bj.xiaozhu.com/search-duanzufang-p1-0/

http://bj.xiaozhu.com/search-duanzufang-p2-0/

http://bj.xiaozhu.com/search-duanzufang-p3-0/

http://bj.xiaozhu.com/search-duanzufang-p4-0/

……

通過以下代碼即可構造出13頁URL的列表數據：

通過一行代碼即可構造出來，通過for循環打印出每個URL，如圖1.5所示。

圖1.5 列表推導式構造URL列表

注意：本網站為小豬短租網。

2. 字典

Python的字典數據結構與現實中的字典類似，以鍵值對（'key'-'value'）的形式表現出來。本文中只講解字典的創造，字典的操作在後面會詳細介紹。字典的格式如下：

注意：插入MongoDB數據庫需用字典結構。

3. 元組和集合

在爬蟲中，元組和集合很少用到，因此這裡只做簡單介紹。元組類似於列表，但是元組的元素不能修改只能查看，元組的格式如下：

tuple = (1,2,3)

集合的概念類似數學中的集合。每個集合中的元素是無序的，不可以有重複的對象，因此可以通過集合把重複的數據去除。

注意：集合是用大括號構建的。

05 Python文件操作

在爬蟲初期的工作中，常常會把數據存儲到文件中。本節主要講解Python如何打開文件和讀寫數據。

1. 打開文件

Python中通過open()函數打開文件，語法如下：

open(name[, mode[, buffering]])

open()函數使用文件名作為唯一的強制參數，然後返回一個文件對象。模式（mode）和緩衝（buffering）是可選參數。在Python的文件操作中，mode參數的輸入是有必要的，而buffering使用較少。

如果在本機上有名為file.txt的文件（讀者可以在本機中新建一個文本文件），其存儲路徑為C:\\Users\\Administrator\\Desktop，那麼可以通過下面代碼打開文件：

f = open('C:/Users/Administrator/Desktop/file.txt')

注意：此代碼為Windows系統下的路徑寫法。

如果文件不存在，則會出現如圖1.6所示的錯誤。

圖1.6 文件不存在報錯信息

如果open()函數只是加入文件的路徑這一個參數，則只能打開文件並讀取文件的相關內容。如果要向文件中寫入內容，則必須加入模式這個參數了。下面首先來看看open()函數中模式參數的常用值，如表1.1所示。

表1.1 open()函數中模式參數的常用值

2. 讀寫文件

上一節中有了名為f的類文件對象，那麼就可以通過f.write()方法和f.read()方法寫入和讀取數據了。

f = open('C:/Users/Administrator/Desktop/file.txt','w+')

f.write('hello world')

這時，在本機上打開file.txt文件，可以看到如圖1.7所示的結果。

圖1.7 Python寫文件

注意：如果沒有建立文件，運行上面代碼也可以成功。

如果再次運行程序，txt文件中的內容不會繼續添加，可以修改模式參數為'r+'，便可一直寫入文件。

Python讀取文件通過read()方法，下面嘗試把f的類文件對象寫入的數據讀取出來，使用如下代碼即可完成操作：

3. 關閉文件

當完成讀寫工作後，應該牢記使用close()方法關閉文件。這樣可以保證Python進行緩衝的清理（出於效率考慮而把數據臨時存儲在內存中）和文件的安全性。通過下面代碼即可關閉文件。

06 Python面向對象

Python作為一個面向對象的語言，很容易創建一個類和對象。本節主要講解類的定義及其相關使用方法。

1. 定義類

類是用來描述具有相同屬性和方法的對象集合。人可以通過不同的膚色劃分為不同的種族，食物也有不同的種類，商品也是形形色色。但劃分為同一類的物體，肯定具有相似的特徵和行為方式。

對於同一款自行車而言，它們的組成結構都是一樣的，如車架、車輪和腳踏板等。通過Python可以定義這個自行車的類：

class Bike:

compose = ['frame','wheel','pedal']

通過使用class定義一個自行車的類，類中的變量compose稱為類的變量，專業術語為類的屬性。這樣，顧客購買的自行車組成結構就是一樣的了。

my_bike = Bike()

結果如圖1.8所示。

圖1.8 類屬性引用

在左邊寫上變量名，右邊寫上類的名稱，這個過程稱之為類的實例化，而my_bike就是類的實例。通過“.”加上類的屬性，就是類屬性的引用。類的屬性會被類的實例共享，所以結果都是一樣的。

2. 實例屬性

對於同一款自行車來說，有些顧客買回去後會改造下，如加一個車筐可以放東西等。

結果如圖1.9所示。

▲圖1.9 實例屬性

說明：通過給類的實例屬性進行賦值，也就是實例屬性。compose屬性屬於所有的該款自行車，而other屬性只屬於my_bike這個類的實例。

3. 實例方法

讀者是否還記得字符串的format()方法。方法就是函數，方法是對實例進行使用的，所以又叫實例方法。對於自行車而言，它的方法就是騎行。

結果如圖1.10所示。

圖1.10 實例方法

注意：這裡的self參數就是實例本身。

和函數一樣，實例方法也是可以有參數的。

結果如圖1.11所示。

圖1.11 實例方法多參數

Python的類中有一些“魔法方法”，_init_()方法就是其中之一。在我們創造實例的時候，不需要引用該方法也會被自動執行。

"

本文立足基礎，講解Python和PyCharm的安裝，及Python最簡單的語法基礎和爬蟲技術中所需的Python語法。

01 Python與PyCharm安裝

“工欲善其事，必先利其器”，本節介紹Python環境的安裝和Python的集成開發環境（IDE）PyCharm的安裝。

1. Python安裝（Windows、Mac和Linux）

當前主流的Python版本為2.x和3.x。由於Python 2第三方庫更多（很多庫沒有向Python 3轉移），企業普遍使用Python 2。如果作為學習和研究的話，建議使用Python 3，因為它是未來的發展方向。所以本教程選擇Python 3的環境。

1.1 Windows中安裝Python 3

在Windows系統中安裝Python 3，請參照下面的步驟進行。

打開瀏覽器，訪問Python官網（https://www.python.org/）。

光標移動至Downloads鏈接，單擊Windows鏈接。

根據自己的Windows版本（32位或64位），下載相應的Python 3.5版本，如為Windows 32位系統，應下載Windows x86 executable installer，如果為Windows 64位系統，應下載Windows x86-64 executable installer。

單擊運行文件，勾選Add Python 3.5 to PATH，然後單擊Install Now按鈕即可完成安裝。

在計算機中打開命令提示符（cmd）窗口，輸入python，如圖1.1所示，說明Python環境安裝成功。

圖1.1 運行Python環境

當界面出現提示符>>>時，就表明進入了Python交互式環境，輸入代碼後按Enter鍵即可運行Python代碼，通過輸入exit()並按Enter鍵，就可以退出Python交互式環境。

注意：如果出現錯誤，可能是因為安裝時未勾選Add Python3.5 to PATH選項，此時卸載Python後重新安裝時勾選Add Python3.5 to PATH選項即可。

1.2 Mac中安裝Python3

Mac系統中自帶了Python 2.7，需到Python官網上下載並安裝Python3.5。Mac系統中的安裝比Windows更為簡單，一直單擊“下一步”按鈕即可完成。安裝完後，打開終端並輸入Python3，即可進入Mac的Python3的交互式環境。

1.3 Linux中安裝Python3

大部分Linux系統內置了Python2和Python3，通過在終端輸入python–version，可以查看當前Python3的版本。如果需要安裝某個特定版本的Python，可以在終端中輸入：

sudo apt-get install python3.5

2. PyCharm安裝

安裝好Python環境後，還需要安裝一個集成開發環境（IDE），IDE集成了代碼編寫功能、分析功能、編譯功能和調試功能。在這裡向讀者推薦一個最智能、好用的Python IDE，叫做PyCharm。進入PyCharm的官網，下載社區版即可：

http://www.jetbrains.com/pycharm/

由於PyCharm上手極為簡單，因此就不詳細講解PyCharm的使用方法了。以下講解如何使用PyCharm關聯Python解釋器，讓PyCharm可以運行Python代碼。

打開PyCharm，在菜單欄中選擇File ∣ Defalut Settings命令。

在彈出的對話框中選擇Project Interpreter，然後在右邊選擇Python環境，這裡選擇Python 3.5，單擊OK按鈕，即可關聯Python解釋器，如圖1.2所示。

圖1.2 關聯Python解釋器

02 變量和字符串

本節主要介紹Python變量的概念、字符串的基本使用方法、字符串的切片和索引，以及字符串的幾種常用方法。

1. 變量

Python中的變很好理解，例如：

a = 1

這種操作稱為賦值，意思為將數值1賦給了變量a。

注意：Python中語句結束不需要以分號結束，變量不需要提前定義。

現在有變量a和變量b，可以通過下面代碼進行變量a、b值的對換。

這種方法類似於將兩個杯子中的飲料對換，只需要多加一個杯子，即可完成飲料的對換工作。

2. 字符串的“加法”和“乘法”

由於Python爬蟲的對象大部分為文本，所以字符串的用法尤為重要。在Python中，字符串由雙引號或單引號和引號中的字符組成。首先，通過下面代碼看看字符串的“加法”：

在爬蟲代碼中，會經常構造URL，例如，在爬取一個網頁鏈接時，只有一部分/u/9104ebf5e177，這部分鏈接是無法訪問的，還需要http://www.jianshu.com，這時可以通過字符串的“加法”進行合併。

注意：此網站為筆者的簡書首頁。

Python的字符串不僅可以相加，也可以乘以一個數字：

字符串乘以一個數字，意思就是將字符串複製這個數字的份數。

3. 字符串的切片和索引

字符串的切片和索引就是通過string[x]，獲取字符串的一部分信息：

通過圖1.3就能清楚地理解字符串的切片和索引。

圖1.3 字符串切片和索引

注意：a[0:5]中的第5個是不會選擇的。

在爬蟲實戰中，經常會通過字符串的切片和索引，提取需要的部分，剔除一些不需要的部分。

4. 字符串方法

Python作為面向對象的語言，每個對象都有相應的方法，字符串也一樣，擁有多種方法，在這裡介紹爬蟲技術中常用的幾種方法。

4.1 split()方法

字符串的split()方法就是通過給定的分隔符（在這裡為‘.’），將一個字符串分割為一個列表（後面將詳細講解列表）。

注意：如果沒有提供任何分隔符，程序會把所有的空格作為分隔符（空格、製表、換行等）。

4.2 repalce()方法

這種方法類似文本中的“查找和替換”功能。

4.3 strip()方法

strip()方法返回去除兩側（不包括內部）空格的字符串，也可以指定需要去除的字符，將它們列為參數中即可。

這個方法只能去除兩側的字符，在爬蟲得到的文本中，文本兩側常會有多餘的空格，只需使用字符串的strip()方法即可去除多餘的空格部分。

4.4 format()方法

最後，再講解下好用的字符串格式化符，首先看以下代碼：

字符串格式化符就像是做選擇題，留了空給做題者選擇。在爬蟲過程中，有些網頁鏈接的部分參數是可變的，這時使用字符串格式化符可以減少代碼的使用量。

例如，Pexels素材網（https://www.pexels.com/），當搜索圖片時，網頁鏈接也會發生變化。

如在搜索欄中輸入book，網頁跳轉為https://www.pexels.com/search/book/，可以設計如下代碼，筆者只需輸入搜索內容，便可返回網頁鏈接。

運行程序並輸入book，便可返回網頁鏈接，單擊網頁鏈接便可訪問網頁了，如圖1.4所示。

圖1.4 字符串格式化符演示

03 函數與控制語句

本節主要介紹Python()函數的定義與使用方法，介紹Python的判斷和循環兩種爬蟲技術中常用的控制語句。

1. 函數

“髒活累活交給函數來做”，首先，看看Python中定義函數的方法。

製作一個輸入直角邊就能計算出直角三角形的面積函數：

注意：讀者不需要太糾結二者的區別，用return是返回一個值，而第二個是調用函數執行打印功能。

通過輸入function(2,3)，便可以調用函數，計算直角邊為2和3的直角三角形的面積。現在來做一個綜合練習：讀者都知道網上公佈的電話號碼，如156****9354，中間的數值用其他符號代替了，而用戶輸入手機號時卻是完整地輸入，下面就通過Python()函數來實現這種轉換功能。

注意：這裡的手機號碼是隨意輸入的，不是真實的號碼。

代碼說明如下：

定義了一個名為change_number的函數。

對輸入的參數進行切片，把參數的[3:7]部分替換為‘*’號，並打印出來。

調用函數。

2. 判斷語句

在爬蟲實戰中也會經常使用判斷語句，Python的判斷語句格式如下：

在平時使用密碼時，輸入的密碼正確即可登錄，密碼錯誤時就需要再次輸入密碼。

程序說明如下：

運行程序，輸入密碼後按Enter鍵。

如果輸入的字符串為12345，則打印“輸入成功！”，程序結束。

如果輸入的字符串不是12345，則打印“錯誤，再輸入”，繼續運行程序，直到輸入正確為止。

讀者也可以將程序設計得更為有趣，例如，“3次輸入失敗後，退出程序”等。

3. 循環語句

Python的循環語句包括for循環和while循環，代碼如下：

例如，設計一個小程序，計算1～100的和：

04 Python數據結構

數據結構是存放數據的容器，本節主要講解Python的4種基本數據結構，即列表、字典、元組和集合。

1. 列表

在爬蟲實戰中，使用最多的就是列表數據結構，不論是構造出的多個URL，還是爬取到的數據，大多數都為列表數據結構。下面首先介紹列表最顯著的特徵：

列表中的每一個元素都是可變的。

列表的元素都是有序的，也就是說每個元素都有對應的位置（類似字符串的切片和索引）。

列表可以容納所有的對象。

列表中的每個元素都是可變的，這意味著可以對列表進行增、刪、改操作，這些操作在爬蟲中很少使用，因此這裡不再給讀者添加知識負擔。

列表的每個元素都有對應的位置，這種用法與字符串的切片和索引很相似。

如果為切片，返回的也是列表的數據結構。

列表可以容納所有的對象：

列表中會經常用到多重循環，因此讀者有必要去了解和使用多重循環。現在，擺在讀者面前有兩個列表，分別是姓名和年齡的列表：

這時可以通過多重循環讓name和age同時打印在屏幕上：

注意：多重循環前後變量要一致。

在爬蟲中，經常請求多個網頁，通常情況下會把網頁存到列表中，然後循環依次取出並訪問爬取數據。這些網頁都有一定的規律，如果是手動將這些網頁URL存入到列表中，不僅花費太多時間，也會造成代碼冗餘。這時可通過列表推導式，構造出這樣的列表，例如某個網站每頁的URL是這樣的（一共13頁）：

http://bj.xiaozhu.com/search-duanzufang-p1-0/

http://bj.xiaozhu.com/search-duanzufang-p2-0/

http://bj.xiaozhu.com/search-duanzufang-p3-0/

http://bj.xiaozhu.com/search-duanzufang-p4-0/

……

通過以下代碼即可構造出13頁URL的列表數據：

通過一行代碼即可構造出來，通過for循環打印出每個URL，如圖1.5所示。

圖1.5 列表推導式構造URL列表

注意：本網站為小豬短租網。

2. 字典

Python的字典數據結構與現實中的字典類似，以鍵值對（'key'-'value'）的形式表現出來。本文中只講解字典的創造，字典的操作在後面會詳細介紹。字典的格式如下：

注意：插入MongoDB數據庫需用字典結構。

3. 元組和集合

在爬蟲中，元組和集合很少用到，因此這裡只做簡單介紹。元組類似於列表，但是元組的元素不能修改只能查看，元組的格式如下：

tuple = (1,2,3)

集合的概念類似數學中的集合。每個集合中的元素是無序的，不可以有重複的對象，因此可以通過集合把重複的數據去除。

注意：集合是用大括號構建的。

05 Python文件操作

在爬蟲初期的工作中，常常會把數據存儲到文件中。本節主要講解Python如何打開文件和讀寫數據。

1. 打開文件

Python中通過open()函數打開文件，語法如下：

open(name[, mode[, buffering]])

open()函數使用文件名作為唯一的強制參數，然後返回一個文件對象。模式（mode）和緩衝（buffering）是可選參數。在Python的文件操作中，mode參數的輸入是有必要的，而buffering使用較少。

如果在本機上有名為file.txt的文件（讀者可以在本機中新建一個文本文件），其存儲路徑為C:\\Users\\Administrator\\Desktop，那麼可以通過下面代碼打開文件：

f = open('C:/Users/Administrator/Desktop/file.txt')

注意：此代碼為Windows系統下的路徑寫法。

如果文件不存在，則會出現如圖1.6所示的錯誤。

圖1.6 文件不存在報錯信息

如果open()函數只是加入文件的路徑這一個參數，則只能打開文件並讀取文件的相關內容。如果要向文件中寫入內容，則必須加入模式這個參數了。下面首先來看看open()函數中模式參數的常用值，如表1.1所示。

表1.1 open()函數中模式參數的常用值

2. 讀寫文件

上一節中有了名為f的類文件對象，那麼就可以通過f.write()方法和f.read()方法寫入和讀取數據了。

f = open('C:/Users/Administrator/Desktop/file.txt','w+')

f.write('hello world')

這時，在本機上打開file.txt文件，可以看到如圖1.7所示的結果。

圖1.7 Python寫文件

注意：如果沒有建立文件，運行上面代碼也可以成功。

如果再次運行程序，txt文件中的內容不會繼續添加，可以修改模式參數為'r+'，便可一直寫入文件。

Python讀取文件通過read()方法，下面嘗試把f的類文件對象寫入的數據讀取出來，使用如下代碼即可完成操作：

3. 關閉文件

當完成讀寫工作後，應該牢記使用close()方法關閉文件。這樣可以保證Python進行緩衝的清理（出於效率考慮而把數據臨時存儲在內存中）和文件的安全性。通過下面代碼即可關閉文件。

06 Python面向對象

Python作為一個面向對象的語言，很容易創建一個類和對象。本節主要講解類的定義及其相關使用方法。

1. 定義類

類是用來描述具有相同屬性和方法的對象集合。人可以通過不同的膚色劃分為不同的種族，食物也有不同的種類，商品也是形形色色。但劃分為同一類的物體，肯定具有相似的特徵和行為方式。

對於同一款自行車而言，它們的組成結構都是一樣的，如車架、車輪和腳踏板等。通過Python可以定義這個自行車的類：

class Bike:

compose = ['frame','wheel','pedal']

通過使用class定義一個自行車的類，類中的變量compose稱為類的變量，專業術語為類的屬性。這樣，顧客購買的自行車組成結構就是一樣的了。

my_bike = Bike()

結果如圖1.8所示。

圖1.8 類屬性引用

在左邊寫上變量名，右邊寫上類的名稱，這個過程稱之為類的實例化，而my_bike就是類的實例。通過“.”加上類的屬性，就是類屬性的引用。類的屬性會被類的實例共享，所以結果都是一樣的。

2. 實例屬性

對於同一款自行車來說，有些顧客買回去後會改造下，如加一個車筐可以放東西等。

結果如圖1.9所示。

▲圖1.9 實例屬性

說明：通過給類的實例屬性進行賦值，也就是實例屬性。compose屬性屬於所有的該款自行車，而other屬性只屬於my_bike這個類的實例。

3. 實例方法

讀者是否還記得字符串的format()方法。方法就是函數，方法是對實例進行使用的，所以又叫實例方法。對於自行車而言，它的方法就是騎行。

結果如圖1.10所示。

圖1.10 實例方法

注意：這裡的self參數就是實例本身。

和函數一樣，實例方法也是可以有參數的。

結果如圖1.11所示。

圖1.11 實例方法多參數

Python的類中有一些“魔法方法”，_init_()方法就是其中之一。在我們創造實例的時候，不需要引用該方法也會被自動執行。

結果如圖1.12所示。

"

本文立足基礎，講解Python和PyCharm的安裝，及Python最簡單的語法基礎和爬蟲技術中所需的Python語法。

01 Python與PyCharm安裝

“工欲善其事，必先利其器”，本節介紹Python環境的安裝和Python的集成開發環境（IDE）PyCharm的安裝。

1. Python安裝（Windows、Mac和Linux）

當前主流的Python版本為2.x和3.x。由於Python 2第三方庫更多（很多庫沒有向Python 3轉移），企業普遍使用Python 2。如果作為學習和研究的話，建議使用Python 3，因為它是未來的發展方向。所以本教程選擇Python 3的環境。

1.1 Windows中安裝Python 3

在Windows系統中安裝Python 3，請參照下面的步驟進行。

打開瀏覽器，訪問Python官網（https://www.python.org/）。

光標移動至Downloads鏈接，單擊Windows鏈接。

根據自己的Windows版本（32位或64位），下載相應的Python 3.5版本，如為Windows 32位系統，應下載Windows x86 executable installer，如果為Windows 64位系統，應下載Windows x86-64 executable installer。

單擊運行文件，勾選Add Python 3.5 to PATH，然後單擊Install Now按鈕即可完成安裝。

在計算機中打開命令提示符（cmd）窗口，輸入python，如圖1.1所示，說明Python環境安裝成功。

圖1.1 運行Python環境

當界面出現提示符>>>時，就表明進入了Python交互式環境，輸入代碼後按Enter鍵即可運行Python代碼，通過輸入exit()並按Enter鍵，就可以退出Python交互式環境。

注意：如果出現錯誤，可能是因為安裝時未勾選Add Python3.5 to PATH選項，此時卸載Python後重新安裝時勾選Add Python3.5 to PATH選項即可。

1.2 Mac中安裝Python3

Mac系統中自帶了Python 2.7，需到Python官網上下載並安裝Python3.5。Mac系統中的安裝比Windows更為簡單，一直單擊“下一步”按鈕即可完成。安裝完後，打開終端並輸入Python3，即可進入Mac的Python3的交互式環境。

1.3 Linux中安裝Python3

大部分Linux系統內置了Python2和Python3，通過在終端輸入python–version，可以查看當前Python3的版本。如果需要安裝某個特定版本的Python，可以在終端中輸入：

sudo apt-get install python3.5

2. PyCharm安裝

安裝好Python環境後，還需要安裝一個集成開發環境（IDE），IDE集成了代碼編寫功能、分析功能、編譯功能和調試功能。在這裡向讀者推薦一個最智能、好用的Python IDE，叫做PyCharm。進入PyCharm的官網，下載社區版即可：

http://www.jetbrains.com/pycharm/

由於PyCharm上手極為簡單，因此就不詳細講解PyCharm的使用方法了。以下講解如何使用PyCharm關聯Python解釋器，讓PyCharm可以運行Python代碼。

打開PyCharm，在菜單欄中選擇File ∣ Defalut Settings命令。

在彈出的對話框中選擇Project Interpreter，然後在右邊選擇Python環境，這裡選擇Python 3.5，單擊OK按鈕，即可關聯Python解釋器，如圖1.2所示。

圖1.2 關聯Python解釋器

02 變量和字符串

本節主要介紹Python變量的概念、字符串的基本使用方法、字符串的切片和索引，以及字符串的幾種常用方法。

1. 變量

Python中的變很好理解，例如：

a = 1

這種操作稱為賦值，意思為將數值1賦給了變量a。

注意：Python中語句結束不需要以分號結束，變量不需要提前定義。

現在有變量a和變量b，可以通過下面代碼進行變量a、b值的對換。

這種方法類似於將兩個杯子中的飲料對換，只需要多加一個杯子，即可完成飲料的對換工作。

2. 字符串的“加法”和“乘法”

由於Python爬蟲的對象大部分為文本，所以字符串的用法尤為重要。在Python中，字符串由雙引號或單引號和引號中的字符組成。首先，通過下面代碼看看字符串的“加法”：

在爬蟲代碼中，會經常構造URL，例如，在爬取一個網頁鏈接時，只有一部分/u/9104ebf5e177，這部分鏈接是無法訪問的，還需要http://www.jianshu.com，這時可以通過字符串的“加法”進行合併。

注意：此網站為筆者的簡書首頁。

Python的字符串不僅可以相加，也可以乘以一個數字：

字符串乘以一個數字，意思就是將字符串複製這個數字的份數。

3. 字符串的切片和索引

字符串的切片和索引就是通過string[x]，獲取字符串的一部分信息：

通過圖1.3就能清楚地理解字符串的切片和索引。

圖1.3 字符串切片和索引

注意：a[0:5]中的第5個是不會選擇的。

在爬蟲實戰中，經常會通過字符串的切片和索引，提取需要的部分，剔除一些不需要的部分。

4. 字符串方法

Python作為面向對象的語言，每個對象都有相應的方法，字符串也一樣，擁有多種方法，在這裡介紹爬蟲技術中常用的幾種方法。

4.1 split()方法

字符串的split()方法就是通過給定的分隔符（在這裡為‘.’），將一個字符串分割為一個列表（後面將詳細講解列表）。

注意：如果沒有提供任何分隔符，程序會把所有的空格作為分隔符（空格、製表、換行等）。

4.2 repalce()方法

這種方法類似文本中的“查找和替換”功能。

4.3 strip()方法

strip()方法返回去除兩側（不包括內部）空格的字符串，也可以指定需要去除的字符，將它們列為參數中即可。

這個方法只能去除兩側的字符，在爬蟲得到的文本中，文本兩側常會有多餘的空格，只需使用字符串的strip()方法即可去除多餘的空格部分。

4.4 format()方法

最後，再講解下好用的字符串格式化符，首先看以下代碼：

字符串格式化符就像是做選擇題，留了空給做題者選擇。在爬蟲過程中，有些網頁鏈接的部分參數是可變的，這時使用字符串格式化符可以減少代碼的使用量。

例如，Pexels素材網（https://www.pexels.com/），當搜索圖片時，網頁鏈接也會發生變化。

如在搜索欄中輸入book，網頁跳轉為https://www.pexels.com/search/book/，可以設計如下代碼，筆者只需輸入搜索內容，便可返回網頁鏈接。

運行程序並輸入book，便可返回網頁鏈接，單擊網頁鏈接便可訪問網頁了，如圖1.4所示。

圖1.4 字符串格式化符演示

03 函數與控制語句

本節主要介紹Python()函數的定義與使用方法，介紹Python的判斷和循環兩種爬蟲技術中常用的控制語句。

1. 函數

“髒活累活交給函數來做”，首先，看看Python中定義函數的方法。

製作一個輸入直角邊就能計算出直角三角形的面積函數：

注意：讀者不需要太糾結二者的區別，用return是返回一個值，而第二個是調用函數執行打印功能。

通過輸入function(2,3)，便可以調用函數，計算直角邊為2和3的直角三角形的面積。現在來做一個綜合練習：讀者都知道網上公佈的電話號碼，如156****9354，中間的數值用其他符號代替了，而用戶輸入手機號時卻是完整地輸入，下面就通過Python()函數來實現這種轉換功能。

注意：這裡的手機號碼是隨意輸入的，不是真實的號碼。

代碼說明如下：

定義了一個名為change_number的函數。

對輸入的參數進行切片，把參數的[3:7]部分替換為‘*’號，並打印出來。

調用函數。

2. 判斷語句

在爬蟲實戰中也會經常使用判斷語句，Python的判斷語句格式如下：

在平時使用密碼時，輸入的密碼正確即可登錄，密碼錯誤時就需要再次輸入密碼。

程序說明如下：

運行程序，輸入密碼後按Enter鍵。

如果輸入的字符串為12345，則打印“輸入成功！”，程序結束。

如果輸入的字符串不是12345，則打印“錯誤，再輸入”，繼續運行程序，直到輸入正確為止。

讀者也可以將程序設計得更為有趣，例如，“3次輸入失敗後，退出程序”等。

3. 循環語句

Python的循環語句包括for循環和while循環，代碼如下：

例如，設計一個小程序，計算1～100的和：

04 Python數據結構

數據結構是存放數據的容器，本節主要講解Python的4種基本數據結構，即列表、字典、元組和集合。

1. 列表

在爬蟲實戰中，使用最多的就是列表數據結構，不論是構造出的多個URL，還是爬取到的數據，大多數都為列表數據結構。下面首先介紹列表最顯著的特徵：

列表中的每一個元素都是可變的。

列表的元素都是有序的，也就是說每個元素都有對應的位置（類似字符串的切片和索引）。

列表可以容納所有的對象。

列表中的每個元素都是可變的，這意味著可以對列表進行增、刪、改操作，這些操作在爬蟲中很少使用，因此這裡不再給讀者添加知識負擔。

列表的每個元素都有對應的位置，這種用法與字符串的切片和索引很相似。

如果為切片，返回的也是列表的數據結構。

列表可以容納所有的對象：

列表中會經常用到多重循環，因此讀者有必要去了解和使用多重循環。現在，擺在讀者面前有兩個列表，分別是姓名和年齡的列表：

這時可以通過多重循環讓name和age同時打印在屏幕上：

注意：多重循環前後變量要一致。

在爬蟲中，經常請求多個網頁，通常情況下會把網頁存到列表中，然後循環依次取出並訪問爬取數據。這些網頁都有一定的規律，如果是手動將這些網頁URL存入到列表中，不僅花費太多時間，也會造成代碼冗餘。這時可通過列表推導式，構造出這樣的列表，例如某個網站每頁的URL是這樣的（一共13頁）：

http://bj.xiaozhu.com/search-duanzufang-p1-0/

http://bj.xiaozhu.com/search-duanzufang-p2-0/

http://bj.xiaozhu.com/search-duanzufang-p3-0/

http://bj.xiaozhu.com/search-duanzufang-p4-0/

……

通過以下代碼即可構造出13頁URL的列表數據：

通過一行代碼即可構造出來，通過for循環打印出每個URL，如圖1.5所示。

圖1.5 列表推導式構造URL列表

注意：本網站為小豬短租網。

2. 字典

Python的字典數據結構與現實中的字典類似，以鍵值對（'key'-'value'）的形式表現出來。本文中只講解字典的創造，字典的操作在後面會詳細介紹。字典的格式如下：

注意：插入MongoDB數據庫需用字典結構。

3. 元組和集合

在爬蟲中，元組和集合很少用到，因此這裡只做簡單介紹。元組類似於列表，但是元組的元素不能修改只能查看，元組的格式如下：

tuple = (1,2,3)

集合的概念類似數學中的集合。每個集合中的元素是無序的，不可以有重複的對象，因此可以通過集合把重複的數據去除。

注意：集合是用大括號構建的。

05 Python文件操作

在爬蟲初期的工作中，常常會把數據存儲到文件中。本節主要講解Python如何打開文件和讀寫數據。

1. 打開文件

Python中通過open()函數打開文件，語法如下：

open(name[, mode[, buffering]])

open()函數使用文件名作為唯一的強制參數，然後返回一個文件對象。模式（mode）和緩衝（buffering）是可選參數。在Python的文件操作中，mode參數的輸入是有必要的，而buffering使用較少。

如果在本機上有名為file.txt的文件（讀者可以在本機中新建一個文本文件），其存儲路徑為C:\\Users\\Administrator\\Desktop，那麼可以通過下面代碼打開文件：

f = open('C:/Users/Administrator/Desktop/file.txt')

注意：此代碼為Windows系統下的路徑寫法。

如果文件不存在，則會出現如圖1.6所示的錯誤。

圖1.6 文件不存在報錯信息

如果open()函數只是加入文件的路徑這一個參數，則只能打開文件並讀取文件的相關內容。如果要向文件中寫入內容，則必須加入模式這個參數了。下面首先來看看open()函數中模式參數的常用值，如表1.1所示。

表1.1 open()函數中模式參數的常用值

2. 讀寫文件

上一節中有了名為f的類文件對象，那麼就可以通過f.write()方法和f.read()方法寫入和讀取數據了。

f = open('C:/Users/Administrator/Desktop/file.txt','w+')

f.write('hello world')

這時，在本機上打開file.txt文件，可以看到如圖1.7所示的結果。

圖1.7 Python寫文件

注意：如果沒有建立文件，運行上面代碼也可以成功。

如果再次運行程序，txt文件中的內容不會繼續添加，可以修改模式參數為'r+'，便可一直寫入文件。

Python讀取文件通過read()方法，下面嘗試把f的類文件對象寫入的數據讀取出來，使用如下代碼即可完成操作：

3. 關閉文件

當完成讀寫工作後，應該牢記使用close()方法關閉文件。這樣可以保證Python進行緩衝的清理（出於效率考慮而把數據臨時存儲在內存中）和文件的安全性。通過下面代碼即可關閉文件。

06 Python面向對象

Python作為一個面向對象的語言，很容易創建一個類和對象。本節主要講解類的定義及其相關使用方法。

1. 定義類

類是用來描述具有相同屬性和方法的對象集合。人可以通過不同的膚色劃分為不同的種族，食物也有不同的種類，商品也是形形色色。但劃分為同一類的物體，肯定具有相似的特徵和行為方式。

對於同一款自行車而言，它們的組成結構都是一樣的，如車架、車輪和腳踏板等。通過Python可以定義這個自行車的類：

class Bike:

compose = ['frame','wheel','pedal']

通過使用class定義一個自行車的類，類中的變量compose稱為類的變量，專業術語為類的屬性。這樣，顧客購買的自行車組成結構就是一樣的了。

my_bike = Bike()

結果如圖1.8所示。

圖1.8 類屬性引用

在左邊寫上變量名，右邊寫上類的名稱，這個過程稱之為類的實例化，而my_bike就是類的實例。通過“.”加上類的屬性，就是類屬性的引用。類的屬性會被類的實例共享，所以結果都是一樣的。

2. 實例屬性

對於同一款自行車來說，有些顧客買回去後會改造下，如加一個車筐可以放東西等。

結果如圖1.9所示。

▲圖1.9 實例屬性

說明：通過給類的實例屬性進行賦值，也就是實例屬性。compose屬性屬於所有的該款自行車，而other屬性只屬於my_bike這個類的實例。

3. 實例方法

讀者是否還記得字符串的format()方法。方法就是函數，方法是對實例進行使用的，所以又叫實例方法。對於自行車而言，它的方法就是騎行。

結果如圖1.10所示。

圖1.10 實例方法

注意：這裡的self參數就是實例本身。

和函數一樣，實例方法也是可以有參數的。

結果如圖1.11所示。

圖1.11 實例方法多參數

Python的類中有一些“魔法方法”，_init_()方法就是其中之一。在我們創造實例的時候，不需要引用該方法也會被自動執行。

結果如圖1.12所示。

圖1.12 魔術方法

4. 類的繼承

共享單車的出現，方便了人們的出行。共享單車和原來的自行車組成結構類似，但多了付費的功能。

"

本文立足基礎，講解Python和PyCharm的安裝，及Python最簡單的語法基礎和爬蟲技術中所需的Python語法。

01 Python與PyCharm安裝

“工欲善其事，必先利其器”，本節介紹Python環境的安裝和Python的集成開發環境（IDE）PyCharm的安裝。

1. Python安裝（Windows、Mac和Linux）

當前主流的Python版本為2.x和3.x。由於Python 2第三方庫更多（很多庫沒有向Python 3轉移），企業普遍使用Python 2。如果作為學習和研究的話，建議使用Python 3，因為它是未來的發展方向。所以本教程選擇Python 3的環境。

1.1 Windows中安裝Python 3

在Windows系統中安裝Python 3，請參照下面的步驟進行。

打開瀏覽器，訪問Python官網（https://www.python.org/）。

光標移動至Downloads鏈接，單擊Windows鏈接。

根據自己的Windows版本（32位或64位），下載相應的Python 3.5版本，如為Windows 32位系統，應下載Windows x86 executable installer，如果為Windows 64位系統，應下載Windows x86-64 executable installer。

單擊運行文件，勾選Add Python 3.5 to PATH，然後單擊Install Now按鈕即可完成安裝。

在計算機中打開命令提示符（cmd）窗口，輸入python，如圖1.1所示，說明Python環境安裝成功。

圖1.1 運行Python環境

當界面出現提示符>>>時，就表明進入了Python交互式環境，輸入代碼後按Enter鍵即可運行Python代碼，通過輸入exit()並按Enter鍵，就可以退出Python交互式環境。

注意：如果出現錯誤，可能是因為安裝時未勾選Add Python3.5 to PATH選項，此時卸載Python後重新安裝時勾選Add Python3.5 to PATH選項即可。

1.2 Mac中安裝Python3

Mac系統中自帶了Python 2.7，需到Python官網上下載並安裝Python3.5。Mac系統中的安裝比Windows更為簡單，一直單擊“下一步”按鈕即可完成。安裝完後，打開終端並輸入Python3，即可進入Mac的Python3的交互式環境。

1.3 Linux中安裝Python3

大部分Linux系統內置了Python2和Python3，通過在終端輸入python–version，可以查看當前Python3的版本。如果需要安裝某個特定版本的Python，可以在終端中輸入：

sudo apt-get install python3.5

2. PyCharm安裝

安裝好Python環境後，還需要安裝一個集成開發環境（IDE），IDE集成了代碼編寫功能、分析功能、編譯功能和調試功能。在這裡向讀者推薦一個最智能、好用的Python IDE，叫做PyCharm。進入PyCharm的官網，下載社區版即可：

http://www.jetbrains.com/pycharm/

由於PyCharm上手極為簡單，因此就不詳細講解PyCharm的使用方法了。以下講解如何使用PyCharm關聯Python解釋器，讓PyCharm可以運行Python代碼。

打開PyCharm，在菜單欄中選擇File ∣ Defalut Settings命令。

在彈出的對話框中選擇Project Interpreter，然後在右邊選擇Python環境，這裡選擇Python 3.5，單擊OK按鈕，即可關聯Python解釋器，如圖1.2所示。

圖1.2 關聯Python解釋器

02 變量和字符串

本節主要介紹Python變量的概念、字符串的基本使用方法、字符串的切片和索引，以及字符串的幾種常用方法。

1. 變量

Python中的變很好理解，例如：

a = 1

這種操作稱為賦值，意思為將數值1賦給了變量a。

注意：Python中語句結束不需要以分號結束，變量不需要提前定義。

現在有變量a和變量b，可以通過下面代碼進行變量a、b值的對換。

這種方法類似於將兩個杯子中的飲料對換，只需要多加一個杯子，即可完成飲料的對換工作。

2. 字符串的“加法”和“乘法”

由於Python爬蟲的對象大部分為文本，所以字符串的用法尤為重要。在Python中，字符串由雙引號或單引號和引號中的字符組成。首先，通過下面代碼看看字符串的“加法”：

在爬蟲代碼中，會經常構造URL，例如，在爬取一個網頁鏈接時，只有一部分/u/9104ebf5e177，這部分鏈接是無法訪問的，還需要http://www.jianshu.com，這時可以通過字符串的“加法”進行合併。

注意：此網站為筆者的簡書首頁。

Python的字符串不僅可以相加，也可以乘以一個數字：

字符串乘以一個數字，意思就是將字符串複製這個數字的份數。

3. 字符串的切片和索引

字符串的切片和索引就是通過string[x]，獲取字符串的一部分信息：

通過圖1.3就能清楚地理解字符串的切片和索引。

圖1.3 字符串切片和索引

注意：a[0:5]中的第5個是不會選擇的。

在爬蟲實戰中，經常會通過字符串的切片和索引，提取需要的部分，剔除一些不需要的部分。

4. 字符串方法

Python作為面向對象的語言，每個對象都有相應的方法，字符串也一樣，擁有多種方法，在這裡介紹爬蟲技術中常用的幾種方法。

4.1 split()方法

字符串的split()方法就是通過給定的分隔符（在這裡為‘.’），將一個字符串分割為一個列表（後面將詳細講解列表）。

注意：如果沒有提供任何分隔符，程序會把所有的空格作為分隔符（空格、製表、換行等）。

4.2 repalce()方法

這種方法類似文本中的“查找和替換”功能。

4.3 strip()方法

strip()方法返回去除兩側（不包括內部）空格的字符串，也可以指定需要去除的字符，將它們列為參數中即可。

這個方法只能去除兩側的字符，在爬蟲得到的文本中，文本兩側常會有多餘的空格，只需使用字符串的strip()方法即可去除多餘的空格部分。

4.4 format()方法

最後，再講解下好用的字符串格式化符，首先看以下代碼：

字符串格式化符就像是做選擇題，留了空給做題者選擇。在爬蟲過程中，有些網頁鏈接的部分參數是可變的，這時使用字符串格式化符可以減少代碼的使用量。

例如，Pexels素材網（https://www.pexels.com/），當搜索圖片時，網頁鏈接也會發生變化。

如在搜索欄中輸入book，網頁跳轉為https://www.pexels.com/search/book/，可以設計如下代碼，筆者只需輸入搜索內容，便可返回網頁鏈接。

運行程序並輸入book，便可返回網頁鏈接，單擊網頁鏈接便可訪問網頁了，如圖1.4所示。

圖1.4 字符串格式化符演示

03 函數與控制語句

本節主要介紹Python()函數的定義與使用方法，介紹Python的判斷和循環兩種爬蟲技術中常用的控制語句。

1. 函數

“髒活累活交給函數來做”，首先，看看Python中定義函數的方法。

製作一個輸入直角邊就能計算出直角三角形的面積函數：

注意：讀者不需要太糾結二者的區別，用return是返回一個值，而第二個是調用函數執行打印功能。

通過輸入function(2,3)，便可以調用函數，計算直角邊為2和3的直角三角形的面積。現在來做一個綜合練習：讀者都知道網上公佈的電話號碼，如156****9354，中間的數值用其他符號代替了，而用戶輸入手機號時卻是完整地輸入，下面就通過Python()函數來實現這種轉換功能。

注意：這裡的手機號碼是隨意輸入的，不是真實的號碼。

代碼說明如下：

定義了一個名為change_number的函數。

對輸入的參數進行切片，把參數的[3:7]部分替換為‘*’號，並打印出來。

調用函數。

2. 判斷語句

在爬蟲實戰中也會經常使用判斷語句，Python的判斷語句格式如下：

在平時使用密碼時，輸入的密碼正確即可登錄，密碼錯誤時就需要再次輸入密碼。

程序說明如下：

運行程序，輸入密碼後按Enter鍵。

如果輸入的字符串為12345，則打印“輸入成功！”，程序結束。

如果輸入的字符串不是12345，則打印“錯誤，再輸入”，繼續運行程序，直到輸入正確為止。

讀者也可以將程序設計得更為有趣，例如，“3次輸入失敗後，退出程序”等。

3. 循環語句

Python的循環語句包括for循環和while循環，代碼如下：

例如，設計一個小程序，計算1～100的和：

04 Python數據結構

數據結構是存放數據的容器，本節主要講解Python的4種基本數據結構，即列表、字典、元組和集合。

1. 列表

在爬蟲實戰中，使用最多的就是列表數據結構，不論是構造出的多個URL，還是爬取到的數據，大多數都為列表數據結構。下面首先介紹列表最顯著的特徵：

列表中的每一個元素都是可變的。

列表的元素都是有序的，也就是說每個元素都有對應的位置（類似字符串的切片和索引）。

列表可以容納所有的對象。

列表中的每個元素都是可變的，這意味著可以對列表進行增、刪、改操作，這些操作在爬蟲中很少使用，因此這裡不再給讀者添加知識負擔。

列表的每個元素都有對應的位置，這種用法與字符串的切片和索引很相似。

如果為切片，返回的也是列表的數據結構。

列表可以容納所有的對象：

列表中會經常用到多重循環，因此讀者有必要去了解和使用多重循環。現在，擺在讀者面前有兩個列表，分別是姓名和年齡的列表：

這時可以通過多重循環讓name和age同時打印在屏幕上：

注意：多重循環前後變量要一致。

在爬蟲中，經常請求多個網頁，通常情況下會把網頁存到列表中，然後循環依次取出並訪問爬取數據。這些網頁都有一定的規律，如果是手動將這些網頁URL存入到列表中，不僅花費太多時間，也會造成代碼冗餘。這時可通過列表推導式，構造出這樣的列表，例如某個網站每頁的URL是這樣的（一共13頁）：

http://bj.xiaozhu.com/search-duanzufang-p1-0/

http://bj.xiaozhu.com/search-duanzufang-p2-0/

http://bj.xiaozhu.com/search-duanzufang-p3-0/

http://bj.xiaozhu.com/search-duanzufang-p4-0/

……

通過以下代碼即可構造出13頁URL的列表數據：

通過一行代碼即可構造出來，通過for循環打印出每個URL，如圖1.5所示。

圖1.5 列表推導式構造URL列表

注意：本網站為小豬短租網。

2. 字典

Python的字典數據結構與現實中的字典類似，以鍵值對（'key'-'value'）的形式表現出來。本文中只講解字典的創造，字典的操作在後面會詳細介紹。字典的格式如下：

注意：插入MongoDB數據庫需用字典結構。

3. 元組和集合

在爬蟲中，元組和集合很少用到，因此這裡只做簡單介紹。元組類似於列表，但是元組的元素不能修改只能查看，元組的格式如下：

tuple = (1,2,3)

集合的概念類似數學中的集合。每個集合中的元素是無序的，不可以有重複的對象，因此可以通過集合把重複的數據去除。

注意：集合是用大括號構建的。

05 Python文件操作

在爬蟲初期的工作中，常常會把數據存儲到文件中。本節主要講解Python如何打開文件和讀寫數據。

1. 打開文件

Python中通過open()函數打開文件，語法如下：

open(name[, mode[, buffering]])

open()函數使用文件名作為唯一的強制參數，然後返回一個文件對象。模式（mode）和緩衝（buffering）是可選參數。在Python的文件操作中，mode參數的輸入是有必要的，而buffering使用較少。

如果在本機上有名為file.txt的文件（讀者可以在本機中新建一個文本文件），其存儲路徑為C:\\Users\\Administrator\\Desktop，那麼可以通過下面代碼打開文件：

f = open('C:/Users/Administrator/Desktop/file.txt')

注意：此代碼為Windows系統下的路徑寫法。

如果文件不存在，則會出現如圖1.6所示的錯誤。

圖1.6 文件不存在報錯信息

如果open()函數只是加入文件的路徑這一個參數，則只能打開文件並讀取文件的相關內容。如果要向文件中寫入內容，則必須加入模式這個參數了。下面首先來看看open()函數中模式參數的常用值，如表1.1所示。

表1.1 open()函數中模式參數的常用值

2. 讀寫文件

上一節中有了名為f的類文件對象，那麼就可以通過f.write()方法和f.read()方法寫入和讀取數據了。

f = open('C:/Users/Administrator/Desktop/file.txt','w+')

f.write('hello world')

這時，在本機上打開file.txt文件，可以看到如圖1.7所示的結果。

圖1.7 Python寫文件

注意：如果沒有建立文件，運行上面代碼也可以成功。

如果再次運行程序，txt文件中的內容不會繼續添加，可以修改模式參數為'r+'，便可一直寫入文件。

Python讀取文件通過read()方法，下面嘗試把f的類文件對象寫入的數據讀取出來，使用如下代碼即可完成操作：

3. 關閉文件

當完成讀寫工作後，應該牢記使用close()方法關閉文件。這樣可以保證Python進行緩衝的清理（出於效率考慮而把數據臨時存儲在內存中）和文件的安全性。通過下面代碼即可關閉文件。

06 Python面向對象

Python作為一個面向對象的語言，很容易創建一個類和對象。本節主要講解類的定義及其相關使用方法。

1. 定義類

類是用來描述具有相同屬性和方法的對象集合。人可以通過不同的膚色劃分為不同的種族，食物也有不同的種類，商品也是形形色色。但劃分為同一類的物體，肯定具有相似的特徵和行為方式。

對於同一款自行車而言，它們的組成結構都是一樣的，如車架、車輪和腳踏板等。通過Python可以定義這個自行車的類：

class Bike:

compose = ['frame','wheel','pedal']

通過使用class定義一個自行車的類，類中的變量compose稱為類的變量，專業術語為類的屬性。這樣，顧客購買的自行車組成結構就是一樣的了。

my_bike = Bike()

結果如圖1.8所示。

圖1.8 類屬性引用

在左邊寫上變量名，右邊寫上類的名稱，這個過程稱之為類的實例化，而my_bike就是類的實例。通過“.”加上類的屬性，就是類屬性的引用。類的屬性會被類的實例共享，所以結果都是一樣的。

2. 實例屬性

對於同一款自行車來說，有些顧客買回去後會改造下，如加一個車筐可以放東西等。

結果如圖1.9所示。

▲圖1.9 實例屬性

說明：通過給類的實例屬性進行賦值，也就是實例屬性。compose屬性屬於所有的該款自行車，而other屬性只屬於my_bike這個類的實例。

3. 實例方法

讀者是否還記得字符串的format()方法。方法就是函數，方法是對實例進行使用的，所以又叫實例方法。對於自行車而言，它的方法就是騎行。

結果如圖1.10所示。

圖1.10 實例方法

注意：這裡的self參數就是實例本身。

和函數一樣，實例方法也是可以有參數的。

結果如圖1.11所示。

圖1.11 實例方法多參數

Python的類中有一些“魔法方法”，_init_()方法就是其中之一。在我們創造實例的時候，不需要引用該方法也會被自動執行。

結果如圖1.12所示。

圖1.12 魔術方法

4. 類的繼承

共享單車的出現，方便了人們的出行。共享單車和原來的自行車組成結構類似，但多了付費的功能。

"

本文立足基礎，講解Python和PyCharm的安裝，及Python最簡單的語法基礎和爬蟲技術中所需的Python語法。

01 Python與PyCharm安裝

“工欲善其事，必先利其器”，本節介紹Python環境的安裝和Python的集成開發環境（IDE）PyCharm的安裝。

1. Python安裝（Windows、Mac和Linux）

當前主流的Python版本為2.x和3.x。由於Python 2第三方庫更多（很多庫沒有向Python 3轉移），企業普遍使用Python 2。如果作為學習和研究的話，建議使用Python 3，因為它是未來的發展方向。所以本教程選擇Python 3的環境。

1.1 Windows中安裝Python 3

在Windows系統中安裝Python 3，請參照下面的步驟進行。

打開瀏覽器，訪問Python官網（https://www.python.org/）。

光標移動至Downloads鏈接，單擊Windows鏈接。

根據自己的Windows版本（32位或64位），下載相應的Python 3.5版本，如為Windows 32位系統，應下載Windows x86 executable installer，如果為Windows 64位系統，應下載Windows x86-64 executable installer。

單擊運行文件，勾選Add Python 3.5 to PATH，然後單擊Install Now按鈕即可完成安裝。

在計算機中打開命令提示符（cmd）窗口，輸入python，如圖1.1所示，說明Python環境安裝成功。

圖1.1 運行Python環境

當界面出現提示符>>>時，就表明進入了Python交互式環境，輸入代碼後按Enter鍵即可運行Python代碼，通過輸入exit()並按Enter鍵，就可以退出Python交互式環境。

注意：如果出現錯誤，可能是因為安裝時未勾選Add Python3.5 to PATH選項，此時卸載Python後重新安裝時勾選Add Python3.5 to PATH選項即可。

1.2 Mac中安裝Python3

Mac系統中自帶了Python 2.7，需到Python官網上下載並安裝Python3.5。Mac系統中的安裝比Windows更為簡單，一直單擊“下一步”按鈕即可完成。安裝完後，打開終端並輸入Python3，即可進入Mac的Python3的交互式環境。

1.3 Linux中安裝Python3

大部分Linux系統內置了Python2和Python3，通過在終端輸入python–version，可以查看當前Python3的版本。如果需要安裝某個特定版本的Python，可以在終端中輸入：

sudo apt-get install python3.5

2. PyCharm安裝

安裝好Python環境後，還需要安裝一個集成開發環境（IDE），IDE集成了代碼編寫功能、分析功能、編譯功能和調試功能。在這裡向讀者推薦一個最智能、好用的Python IDE，叫做PyCharm。進入PyCharm的官網，下載社區版即可：

http://www.jetbrains.com/pycharm/

由於PyCharm上手極為簡單，因此就不詳細講解PyCharm的使用方法了。以下講解如何使用PyCharm關聯Python解釋器，讓PyCharm可以運行Python代碼。

打開PyCharm，在菜單欄中選擇File ∣ Defalut Settings命令。

在彈出的對話框中選擇Project Interpreter，然後在右邊選擇Python環境，這裡選擇Python 3.5，單擊OK按鈕，即可關聯Python解釋器，如圖1.2所示。

圖1.2 關聯Python解釋器

02 變量和字符串

本節主要介紹Python變量的概念、字符串的基本使用方法、字符串的切片和索引，以及字符串的幾種常用方法。

1. 變量

Python中的變很好理解，例如：

a = 1

這種操作稱為賦值，意思為將數值1賦給了變量a。

注意：Python中語句結束不需要以分號結束，變量不需要提前定義。

現在有變量a和變量b，可以通過下面代碼進行變量a、b值的對換。

這種方法類似於將兩個杯子中的飲料對換，只需要多加一個杯子，即可完成飲料的對換工作。

2. 字符串的“加法”和“乘法”

由於Python爬蟲的對象大部分為文本，所以字符串的用法尤為重要。在Python中，字符串由雙引號或單引號和引號中的字符組成。首先，通過下面代碼看看字符串的“加法”：

在爬蟲代碼中，會經常構造URL，例如，在爬取一個網頁鏈接時，只有一部分/u/9104ebf5e177，這部分鏈接是無法訪問的，還需要http://www.jianshu.com，這時可以通過字符串的“加法”進行合併。

注意：此網站為筆者的簡書首頁。

Python的字符串不僅可以相加，也可以乘以一個數字：

字符串乘以一個數字，意思就是將字符串複製這個數字的份數。

3. 字符串的切片和索引

字符串的切片和索引就是通過string[x]，獲取字符串的一部分信息：

通過圖1.3就能清楚地理解字符串的切片和索引。

圖1.3 字符串切片和索引

注意：a[0:5]中的第5個是不會選擇的。

在爬蟲實戰中，經常會通過字符串的切片和索引，提取需要的部分，剔除一些不需要的部分。

4. 字符串方法

Python作為面向對象的語言，每個對象都有相應的方法，字符串也一樣，擁有多種方法，在這裡介紹爬蟲技術中常用的幾種方法。

4.1 split()方法

字符串的split()方法就是通過給定的分隔符（在這裡為‘.’），將一個字符串分割為一個列表（後面將詳細講解列表）。

注意：如果沒有提供任何分隔符，程序會把所有的空格作為分隔符（空格、製表、換行等）。

4.2 repalce()方法

這種方法類似文本中的“查找和替換”功能。

4.3 strip()方法

strip()方法返回去除兩側（不包括內部）空格的字符串，也可以指定需要去除的字符，將它們列為參數中即可。

這個方法只能去除兩側的字符，在爬蟲得到的文本中，文本兩側常會有多餘的空格，只需使用字符串的strip()方法即可去除多餘的空格部分。

4.4 format()方法

最後，再講解下好用的字符串格式化符，首先看以下代碼：

字符串格式化符就像是做選擇題，留了空給做題者選擇。在爬蟲過程中，有些網頁鏈接的部分參數是可變的，這時使用字符串格式化符可以減少代碼的使用量。

例如，Pexels素材網（https://www.pexels.com/），當搜索圖片時，網頁鏈接也會發生變化。

如在搜索欄中輸入book，網頁跳轉為https://www.pexels.com/search/book/，可以設計如下代碼，筆者只需輸入搜索內容，便可返回網頁鏈接。

運行程序並輸入book，便可返回網頁鏈接，單擊網頁鏈接便可訪問網頁了，如圖1.4所示。

圖1.4 字符串格式化符演示

03 函數與控制語句

本節主要介紹Python()函數的定義與使用方法，介紹Python的判斷和循環兩種爬蟲技術中常用的控制語句。

1. 函數

“髒活累活交給函數來做”，首先，看看Python中定義函數的方法。

製作一個輸入直角邊就能計算出直角三角形的面積函數：

注意：讀者不需要太糾結二者的區別，用return是返回一個值，而第二個是調用函數執行打印功能。

通過輸入function(2,3)，便可以調用函數，計算直角邊為2和3的直角三角形的面積。現在來做一個綜合練習：讀者都知道網上公佈的電話號碼，如156****9354，中間的數值用其他符號代替了，而用戶輸入手機號時卻是完整地輸入，下面就通過Python()函數來實現這種轉換功能。

注意：這裡的手機號碼是隨意輸入的，不是真實的號碼。

代碼說明如下：

定義了一個名為change_number的函數。

對輸入的參數進行切片，把參數的[3:7]部分替換為‘*’號，並打印出來。

調用函數。

2. 判斷語句

在爬蟲實戰中也會經常使用判斷語句，Python的判斷語句格式如下：

在平時使用密碼時，輸入的密碼正確即可登錄，密碼錯誤時就需要再次輸入密碼。

程序說明如下：

運行程序，輸入密碼後按Enter鍵。

如果輸入的字符串為12345，則打印“輸入成功！”，程序結束。

如果輸入的字符串不是12345，則打印“錯誤，再輸入”，繼續運行程序，直到輸入正確為止。

讀者也可以將程序設計得更為有趣，例如，“3次輸入失敗後，退出程序”等。

3. 循環語句

Python的循環語句包括for循環和while循環，代碼如下：

例如，設計一個小程序，計算1～100的和：

04 Python數據結構

數據結構是存放數據的容器，本節主要講解Python的4種基本數據結構，即列表、字典、元組和集合。

1. 列表

在爬蟲實戰中，使用最多的就是列表數據結構，不論是構造出的多個URL，還是爬取到的數據，大多數都為列表數據結構。下面首先介紹列表最顯著的特徵：

列表中的每一個元素都是可變的。

列表的元素都是有序的，也就是說每個元素都有對應的位置（類似字符串的切片和索引）。

列表可以容納所有的對象。

列表中的每個元素都是可變的，這意味著可以對列表進行增、刪、改操作，這些操作在爬蟲中很少使用，因此這裡不再給讀者添加知識負擔。

列表的每個元素都有對應的位置，這種用法與字符串的切片和索引很相似。

如果為切片，返回的也是列表的數據結構。

列表可以容納所有的對象：

列表中會經常用到多重循環，因此讀者有必要去了解和使用多重循環。現在，擺在讀者面前有兩個列表，分別是姓名和年齡的列表：

這時可以通過多重循環讓name和age同時打印在屏幕上：

注意：多重循環前後變量要一致。

在爬蟲中，經常請求多個網頁，通常情況下會把網頁存到列表中，然後循環依次取出並訪問爬取數據。這些網頁都有一定的規律，如果是手動將這些網頁URL存入到列表中，不僅花費太多時間，也會造成代碼冗餘。這時可通過列表推導式，構造出這樣的列表，例如某個網站每頁的URL是這樣的（一共13頁）：

http://bj.xiaozhu.com/search-duanzufang-p1-0/

http://bj.xiaozhu.com/search-duanzufang-p2-0/

http://bj.xiaozhu.com/search-duanzufang-p3-0/

http://bj.xiaozhu.com/search-duanzufang-p4-0/

……

通過以下代碼即可構造出13頁URL的列表數據：

通過一行代碼即可構造出來，通過for循環打印出每個URL，如圖1.5所示。

圖1.5 列表推導式構造URL列表

注意：本網站為小豬短租網。

2. 字典

Python的字典數據結構與現實中的字典類似，以鍵值對（'key'-'value'）的形式表現出來。本文中只講解字典的創造，字典的操作在後面會詳細介紹。字典的格式如下：

注意：插入MongoDB數據庫需用字典結構。

3. 元組和集合

在爬蟲中，元組和集合很少用到，因此這裡只做簡單介紹。元組類似於列表，但是元組的元素不能修改只能查看，元組的格式如下：

tuple = (1,2,3)

集合的概念類似數學中的集合。每個集合中的元素是無序的，不可以有重複的對象，因此可以通過集合把重複的數據去除。

注意：集合是用大括號構建的。

05 Python文件操作

在爬蟲初期的工作中，常常會把數據存儲到文件中。本節主要講解Python如何打開文件和讀寫數據。

1. 打開文件

Python中通過open()函數打開文件，語法如下：

open(name[, mode[, buffering]])

open()函數使用文件名作為唯一的強制參數，然後返回一個文件對象。模式（mode）和緩衝（buffering）是可選參數。在Python的文件操作中，mode參數的輸入是有必要的，而buffering使用較少。

如果在本機上有名為file.txt的文件（讀者可以在本機中新建一個文本文件），其存儲路徑為C:\\Users\\Administrator\\Desktop，那麼可以通過下面代碼打開文件：

f = open('C:/Users/Administrator/Desktop/file.txt')

注意：此代碼為Windows系統下的路徑寫法。

如果文件不存在，則會出現如圖1.6所示的錯誤。

圖1.6 文件不存在報錯信息

如果open()函數只是加入文件的路徑這一個參數，則只能打開文件並讀取文件的相關內容。如果要向文件中寫入內容，則必須加入模式這個參數了。下面首先來看看open()函數中模式參數的常用值，如表1.1所示。

表1.1 open()函數中模式參數的常用值

2. 讀寫文件

上一節中有了名為f的類文件對象，那麼就可以通過f.write()方法和f.read()方法寫入和讀取數據了。

f = open('C:/Users/Administrator/Desktop/file.txt','w+')

f.write('hello world')

這時，在本機上打開file.txt文件，可以看到如圖1.7所示的結果。

圖1.7 Python寫文件

注意：如果沒有建立文件，運行上面代碼也可以成功。

如果再次運行程序，txt文件中的內容不會繼續添加，可以修改模式參數為'r+'，便可一直寫入文件。

Python讀取文件通過read()方法，下面嘗試把f的類文件對象寫入的數據讀取出來，使用如下代碼即可完成操作：

3. 關閉文件

當完成讀寫工作後，應該牢記使用close()方法關閉文件。這樣可以保證Python進行緩衝的清理（出於效率考慮而把數據臨時存儲在內存中）和文件的安全性。通過下面代碼即可關閉文件。

06 Python面向對象

Python作為一個面向對象的語言，很容易創建一個類和對象。本節主要講解類的定義及其相關使用方法。

1. 定義類

類是用來描述具有相同屬性和方法的對象集合。人可以通過不同的膚色劃分為不同的種族，食物也有不同的種類，商品也是形形色色。但劃分為同一類的物體，肯定具有相似的特徵和行為方式。

對於同一款自行車而言，它們的組成結構都是一樣的，如車架、車輪和腳踏板等。通過Python可以定義這個自行車的類：

class Bike:

compose = ['frame','wheel','pedal']

通過使用class定義一個自行車的類，類中的變量compose稱為類的變量，專業術語為類的屬性。這樣，顧客購買的自行車組成結構就是一樣的了。

my_bike = Bike()

結果如圖1.8所示。

圖1.8 類屬性引用

在左邊寫上變量名，右邊寫上類的名稱，這個過程稱之為類的實例化，而my_bike就是類的實例。通過“.”加上類的屬性，就是類屬性的引用。類的屬性會被類的實例共享，所以結果都是一樣的。

2. 實例屬性

對於同一款自行車來說，有些顧客買回去後會改造下，如加一個車筐可以放東西等。

結果如圖1.9所示。

▲圖1.9 實例屬性

說明：通過給類的實例屬性進行賦值，也就是實例屬性。compose屬性屬於所有的該款自行車，而other屬性只屬於my_bike這個類的實例。

3. 實例方法

讀者是否還記得字符串的format()方法。方法就是函數，方法是對實例進行使用的，所以又叫實例方法。對於自行車而言，它的方法就是騎行。

結果如圖1.10所示。

圖1.10 實例方法

注意：這裡的self參數就是實例本身。

和函數一樣，實例方法也是可以有參數的。

結果如圖1.11所示。

圖1.11 實例方法多參數

Python的類中有一些“魔法方法”，_init_()方法就是其中之一。在我們創造實例的時候，不需要引用該方法也會被自動執行。

結果如圖1.12所示。

圖1.12 魔術方法

4. 類的繼承

共享單車的出現，方便了人們的出行。共享單車和原來的自行車組成結構類似，但多了付費的功能。

結果如圖1.13所示。

"

本文立足基礎，講解Python和PyCharm的安裝，及Python最簡單的語法基礎和爬蟲技術中所需的Python語法。

01 Python與PyCharm安裝

“工欲善其事，必先利其器”，本節介紹Python環境的安裝和Python的集成開發環境（IDE）PyCharm的安裝。

1. Python安裝（Windows、Mac和Linux）

當前主流的Python版本為2.x和3.x。由於Python 2第三方庫更多（很多庫沒有向Python 3轉移），企業普遍使用Python 2。如果作為學習和研究的話，建議使用Python 3，因為它是未來的發展方向。所以本教程選擇Python 3的環境。

1.1 Windows中安裝Python 3

在Windows系統中安裝Python 3，請參照下面的步驟進行。

打開瀏覽器，訪問Python官網（https://www.python.org/）。

光標移動至Downloads鏈接，單擊Windows鏈接。

根據自己的Windows版本（32位或64位），下載相應的Python 3.5版本，如為Windows 32位系統，應下載Windows x86 executable installer，如果為Windows 64位系統，應下載Windows x86-64 executable installer。

單擊運行文件，勾選Add Python 3.5 to PATH，然後單擊Install Now按鈕即可完成安裝。

在計算機中打開命令提示符（cmd）窗口，輸入python，如圖1.1所示，說明Python環境安裝成功。

圖1.1 運行Python環境

當界面出現提示符>>>時，就表明進入了Python交互式環境，輸入代碼後按Enter鍵即可運行Python代碼，通過輸入exit()並按Enter鍵，就可以退出Python交互式環境。

注意：如果出現錯誤，可能是因為安裝時未勾選Add Python3.5 to PATH選項，此時卸載Python後重新安裝時勾選Add Python3.5 to PATH選項即可。

1.2 Mac中安裝Python3

Mac系統中自帶了Python 2.7，需到Python官網上下載並安裝Python3.5。Mac系統中的安裝比Windows更為簡單，一直單擊“下一步”按鈕即可完成。安裝完後，打開終端並輸入Python3，即可進入Mac的Python3的交互式環境。

1.3 Linux中安裝Python3

大部分Linux系統內置了Python2和Python3，通過在終端輸入python–version，可以查看當前Python3的版本。如果需要安裝某個特定版本的Python，可以在終端中輸入：

sudo apt-get install python3.5

2. PyCharm安裝

安裝好Python環境後，還需要安裝一個集成開發環境（IDE），IDE集成了代碼編寫功能、分析功能、編譯功能和調試功能。在這裡向讀者推薦一個最智能、好用的Python IDE，叫做PyCharm。進入PyCharm的官網，下載社區版即可：

http://www.jetbrains.com/pycharm/

由於PyCharm上手極為簡單，因此就不詳細講解PyCharm的使用方法了。以下講解如何使用PyCharm關聯Python解釋器，讓PyCharm可以運行Python代碼。

打開PyCharm，在菜單欄中選擇File ∣ Defalut Settings命令。

在彈出的對話框中選擇Project Interpreter，然後在右邊選擇Python環境，這裡選擇Python 3.5，單擊OK按鈕，即可關聯Python解釋器，如圖1.2所示。

圖1.2 關聯Python解釋器

02 變量和字符串

本節主要介紹Python變量的概念、字符串的基本使用方法、字符串的切片和索引，以及字符串的幾種常用方法。

1. 變量

Python中的變很好理解，例如：

a = 1

這種操作稱為賦值，意思為將數值1賦給了變量a。

注意：Python中語句結束不需要以分號結束，變量不需要提前定義。

現在有變量a和變量b，可以通過下面代碼進行變量a、b值的對換。

這種方法類似於將兩個杯子中的飲料對換，只需要多加一個杯子，即可完成飲料的對換工作。

2. 字符串的“加法”和“乘法”

由於Python爬蟲的對象大部分為文本，所以字符串的用法尤為重要。在Python中，字符串由雙引號或單引號和引號中的字符組成。首先，通過下面代碼看看字符串的“加法”：

在爬蟲代碼中，會經常構造URL，例如，在爬取一個網頁鏈接時，只有一部分/u/9104ebf5e177，這部分鏈接是無法訪問的，還需要http://www.jianshu.com，這時可以通過字符串的“加法”進行合併。

注意：此網站為筆者的簡書首頁。

Python的字符串不僅可以相加，也可以乘以一個數字：

字符串乘以一個數字，意思就是將字符串複製這個數字的份數。

3. 字符串的切片和索引

字符串的切片和索引就是通過string[x]，獲取字符串的一部分信息：

通過圖1.3就能清楚地理解字符串的切片和索引。

圖1.3 字符串切片和索引

注意：a[0:5]中的第5個是不會選擇的。

在爬蟲實戰中，經常會通過字符串的切片和索引，提取需要的部分，剔除一些不需要的部分。

4. 字符串方法

Python作為面向對象的語言，每個對象都有相應的方法，字符串也一樣，擁有多種方法，在這裡介紹爬蟲技術中常用的幾種方法。

4.1 split()方法

字符串的split()方法就是通過給定的分隔符（在這裡為‘.’），將一個字符串分割為一個列表（後面將詳細講解列表）。

注意：如果沒有提供任何分隔符，程序會把所有的空格作為分隔符（空格、製表、換行等）。

4.2 repalce()方法

這種方法類似文本中的“查找和替換”功能。

4.3 strip()方法

strip()方法返回去除兩側（不包括內部）空格的字符串，也可以指定需要去除的字符，將它們列為參數中即可。

這個方法只能去除兩側的字符，在爬蟲得到的文本中，文本兩側常會有多餘的空格，只需使用字符串的strip()方法即可去除多餘的空格部分。

4.4 format()方法

最後，再講解下好用的字符串格式化符，首先看以下代碼：

字符串格式化符就像是做選擇題，留了空給做題者選擇。在爬蟲過程中，有些網頁鏈接的部分參數是可變的，這時使用字符串格式化符可以減少代碼的使用量。

例如，Pexels素材網（https://www.pexels.com/），當搜索圖片時，網頁鏈接也會發生變化。

如在搜索欄中輸入book，網頁跳轉為https://www.pexels.com/search/book/，可以設計如下代碼，筆者只需輸入搜索內容，便可返回網頁鏈接。

運行程序並輸入book，便可返回網頁鏈接，單擊網頁鏈接便可訪問網頁了，如圖1.4所示。

圖1.4 字符串格式化符演示

03 函數與控制語句

本節主要介紹Python()函數的定義與使用方法，介紹Python的判斷和循環兩種爬蟲技術中常用的控制語句。

1. 函數

“髒活累活交給函數來做”，首先，看看Python中定義函數的方法。

製作一個輸入直角邊就能計算出直角三角形的面積函數：

注意：讀者不需要太糾結二者的區別，用return是返回一個值，而第二個是調用函數執行打印功能。

通過輸入function(2,3)，便可以調用函數，計算直角邊為2和3的直角三角形的面積。現在來做一個綜合練習：讀者都知道網上公佈的電話號碼，如156****9354，中間的數值用其他符號代替了，而用戶輸入手機號時卻是完整地輸入，下面就通過Python()函數來實現這種轉換功能。

注意：這裡的手機號碼是隨意輸入的，不是真實的號碼。

代碼說明如下：

定義了一個名為change_number的函數。

對輸入的參數進行切片，把參數的[3:7]部分替換為‘*’號，並打印出來。

調用函數。

2. 判斷語句

在爬蟲實戰中也會經常使用判斷語句，Python的判斷語句格式如下：

在平時使用密碼時，輸入的密碼正確即可登錄，密碼錯誤時就需要再次輸入密碼。

程序說明如下：

運行程序，輸入密碼後按Enter鍵。

如果輸入的字符串為12345，則打印“輸入成功！”，程序結束。

如果輸入的字符串不是12345，則打印“錯誤，再輸入”，繼續運行程序，直到輸入正確為止。

讀者也可以將程序設計得更為有趣，例如，“3次輸入失敗後，退出程序”等。

3. 循環語句

Python的循環語句包括for循環和while循環，代碼如下：

例如，設計一個小程序，計算1～100的和：

04 Python數據結構

數據結構是存放數據的容器，本節主要講解Python的4種基本數據結構，即列表、字典、元組和集合。

1. 列表

在爬蟲實戰中，使用最多的就是列表數據結構，不論是構造出的多個URL，還是爬取到的數據，大多數都為列表數據結構。下面首先介紹列表最顯著的特徵：

列表中的每一個元素都是可變的。

列表的元素都是有序的，也就是說每個元素都有對應的位置（類似字符串的切片和索引）。

列表可以容納所有的對象。

列表中的每個元素都是可變的，這意味著可以對列表進行增、刪、改操作，這些操作在爬蟲中很少使用，因此這裡不再給讀者添加知識負擔。

列表的每個元素都有對應的位置，這種用法與字符串的切片和索引很相似。

如果為切片，返回的也是列表的數據結構。

列表可以容納所有的對象：

列表中會經常用到多重循環，因此讀者有必要去了解和使用多重循環。現在，擺在讀者面前有兩個列表，分別是姓名和年齡的列表：

這時可以通過多重循環讓name和age同時打印在屏幕上：

注意：多重循環前後變量要一致。

在爬蟲中，經常請求多個網頁，通常情況下會把網頁存到列表中，然後循環依次取出並訪問爬取數據。這些網頁都有一定的規律，如果是手動將這些網頁URL存入到列表中，不僅花費太多時間，也會造成代碼冗餘。這時可通過列表推導式，構造出這樣的列表，例如某個網站每頁的URL是這樣的（一共13頁）：

http://bj.xiaozhu.com/search-duanzufang-p1-0/

http://bj.xiaozhu.com/search-duanzufang-p2-0/

http://bj.xiaozhu.com/search-duanzufang-p3-0/

http://bj.xiaozhu.com/search-duanzufang-p4-0/

……

通過以下代碼即可構造出13頁URL的列表數據：

通過一行代碼即可構造出來，通過for循環打印出每個URL，如圖1.5所示。

圖1.5 列表推導式構造URL列表

注意：本網站為小豬短租網。

2. 字典

Python的字典數據結構與現實中的字典類似，以鍵值對（'key'-'value'）的形式表現出來。本文中只講解字典的創造，字典的操作在後面會詳細介紹。字典的格式如下：

注意：插入MongoDB數據庫需用字典結構。

3. 元組和集合

在爬蟲中，元組和集合很少用到，因此這裡只做簡單介紹。元組類似於列表，但是元組的元素不能修改只能查看，元組的格式如下：

tuple = (1,2,3)

集合的概念類似數學中的集合。每個集合中的元素是無序的，不可以有重複的對象，因此可以通過集合把重複的數據去除。

注意：集合是用大括號構建的。

05 Python文件操作

在爬蟲初期的工作中，常常會把數據存儲到文件中。本節主要講解Python如何打開文件和讀寫數據。

1. 打開文件

Python中通過open()函數打開文件，語法如下：

open(name[, mode[, buffering]])

open()函數使用文件名作為唯一的強制參數，然後返回一個文件對象。模式（mode）和緩衝（buffering）是可選參數。在Python的文件操作中，mode參數的輸入是有必要的，而buffering使用較少。

如果在本機上有名為file.txt的文件（讀者可以在本機中新建一個文本文件），其存儲路徑為C:\\Users\\Administrator\\Desktop，那麼可以通過下面代碼打開文件：

f = open('C:/Users/Administrator/Desktop/file.txt')

注意：此代碼為Windows系統下的路徑寫法。

如果文件不存在，則會出現如圖1.6所示的錯誤。

圖1.6 文件不存在報錯信息

如果open()函數只是加入文件的路徑這一個參數，則只能打開文件並讀取文件的相關內容。如果要向文件中寫入內容，則必須加入模式這個參數了。下面首先來看看open()函數中模式參數的常用值，如表1.1所示。

表1.1 open()函數中模式參數的常用值

2. 讀寫文件

上一節中有了名為f的類文件對象，那麼就可以通過f.write()方法和f.read()方法寫入和讀取數據了。

f = open('C:/Users/Administrator/Desktop/file.txt','w+')

f.write('hello world')

這時，在本機上打開file.txt文件，可以看到如圖1.7所示的結果。

圖1.7 Python寫文件

注意：如果沒有建立文件，運行上面代碼也可以成功。

如果再次運行程序，txt文件中的內容不會繼續添加，可以修改模式參數為'r+'，便可一直寫入文件。

Python讀取文件通過read()方法，下面嘗試把f的類文件對象寫入的數據讀取出來，使用如下代碼即可完成操作：

3. 關閉文件

當完成讀寫工作後，應該牢記使用close()方法關閉文件。這樣可以保證Python進行緩衝的清理（出於效率考慮而把數據臨時存儲在內存中）和文件的安全性。通過下面代碼即可關閉文件。

06 Python面向對象

Python作為一個面向對象的語言，很容易創建一個類和對象。本節主要講解類的定義及其相關使用方法。

1. 定義類

類是用來描述具有相同屬性和方法的對象集合。人可以通過不同的膚色劃分為不同的種族，食物也有不同的種類，商品也是形形色色。但劃分為同一類的物體，肯定具有相似的特徵和行為方式。

對於同一款自行車而言，它們的組成結構都是一樣的，如車架、車輪和腳踏板等。通過Python可以定義這個自行車的類：

class Bike:

compose = ['frame','wheel','pedal']

通過使用class定義一個自行車的類，類中的變量compose稱為類的變量，專業術語為類的屬性。這樣，顧客購買的自行車組成結構就是一樣的了。

my_bike = Bike()

結果如圖1.8所示。

圖1.8 類屬性引用

在左邊寫上變量名，右邊寫上類的名稱，這個過程稱之為類的實例化，而my_bike就是類的實例。通過“.”加上類的屬性，就是類屬性的引用。類的屬性會被類的實例共享，所以結果都是一樣的。

2. 實例屬性

對於同一款自行車來說，有些顧客買回去後會改造下，如加一個車筐可以放東西等。

結果如圖1.9所示。

▲圖1.9 實例屬性

說明：通過給類的實例屬性進行賦值，也就是實例屬性。compose屬性屬於所有的該款自行車，而other屬性只屬於my_bike這個類的實例。

3. 實例方法

讀者是否還記得字符串的format()方法。方法就是函數，方法是對實例進行使用的，所以又叫實例方法。對於自行車而言，它的方法就是騎行。

結果如圖1.10所示。

圖1.10 實例方法

注意：這裡的self參數就是實例本身。

和函數一樣，實例方法也是可以有參數的。

結果如圖1.11所示。

圖1.11 實例方法多參數

Python的類中有一些“魔法方法”，_init_()方法就是其中之一。在我們創造實例的時候，不需要引用該方法也會被自動執行。

結果如圖1.12所示。

圖1.12 魔術方法

4. 類的繼承

共享單車的出現，方便了人們的出行。共享單車和原來的自行車組成結構類似，但多了付費的功能。

結果如圖1.13所示。

圖1.13 類的繼承

在新的類Share_bike後面的括號中加入Bike，表示Share_bike繼承了Bike父類。父類中的變量和方法可以完全被子類繼承，在特殊情況下，也可以對其覆蓋。

最後：學習Python的有用資源

好像大家都有一個毛病，就是到處蒐集資源，雲盤裡有很多東西，但是基本是從來都不看，所以說視頻在精不在於多，我當時自學python的時候也蒐集了各種視頻，這裡看看，那裡看看，學的一點都不繫統，而且學了之後也找不到工作，視頻一定要最新的，python更新的快，舊的是不可以的。小編給大家分享一套2019年7月份最新的python視頻教程，共400集，帶你從入門到達手寫網絡神經的地步，

領取方式：轉發本文，

然後來私信小編“python”即可免費獲取這套教程和電子書籍啦！

"

本文立足基礎，講解Python和PyCharm的安裝，及Python最簡單的語法基礎和爬蟲技術中所需的Python語法。

01 Python與PyCharm安裝

“工欲善其事，必先利其器”，本節介紹Python環境的安裝和Python的集成開發環境（IDE）PyCharm的安裝。

1. Python安裝（Windows、Mac和Linux）

當前主流的Python版本為2.x和3.x。由於Python 2第三方庫更多（很多庫沒有向Python 3轉移），企業普遍使用Python 2。如果作為學習和研究的話，建議使用Python 3，因為它是未來的發展方向。所以本教程選擇Python 3的環境。

1.1 Windows中安裝Python 3

在Windows系統中安裝Python 3，請參照下面的步驟進行。

打開瀏覽器，訪問Python官網（https://www.python.org/）。

光標移動至Downloads鏈接，單擊Windows鏈接。

根據自己的Windows版本（32位或64位），下載相應的Python 3.5版本，如為Windows 32位系統，應下載Windows x86 executable installer，如果為Windows 64位系統，應下載Windows x86-64 executable installer。

單擊運行文件，勾選Add Python 3.5 to PATH，然後單擊Install Now按鈕即可完成安裝。

在計算機中打開命令提示符（cmd）窗口，輸入python，如圖1.1所示，說明Python環境安裝成功。

圖1.1 運行Python環境

當界面出現提示符>>>時，就表明進入了Python交互式環境，輸入代碼後按Enter鍵即可運行Python代碼，通過輸入exit()並按Enter鍵，就可以退出Python交互式環境。

注意：如果出現錯誤，可能是因為安裝時未勾選Add Python3.5 to PATH選項，此時卸載Python後重新安裝時勾選Add Python3.5 to PATH選項即可。

1.2 Mac中安裝Python3

Mac系統中自帶了Python 2.7，需到Python官網上下載並安裝Python3.5。Mac系統中的安裝比Windows更為簡單，一直單擊“下一步”按鈕即可完成。安裝完後，打開終端並輸入Python3，即可進入Mac的Python3的交互式環境。

1.3 Linux中安裝Python3

大部分Linux系統內置了Python2和Python3，通過在終端輸入python–version，可以查看當前Python3的版本。如果需要安裝某個特定版本的Python，可以在終端中輸入：

sudo apt-get install python3.5

2. PyCharm安裝

安裝好Python環境後，還需要安裝一個集成開發環境（IDE），IDE集成了代碼編寫功能、分析功能、編譯功能和調試功能。在這裡向讀者推薦一個最智能、好用的Python IDE，叫做PyCharm。進入PyCharm的官網，下載社區版即可：

http://www.jetbrains.com/pycharm/

由於PyCharm上手極為簡單，因此就不詳細講解PyCharm的使用方法了。以下講解如何使用PyCharm關聯Python解釋器，讓PyCharm可以運行Python代碼。

打開PyCharm，在菜單欄中選擇File ∣ Defalut Settings命令。

在彈出的對話框中選擇Project Interpreter，然後在右邊選擇Python環境，這裡選擇Python 3.5，單擊OK按鈕，即可關聯Python解釋器，如圖1.2所示。

圖1.2 關聯Python解釋器

02 變量和字符串

本節主要介紹Python變量的概念、字符串的基本使用方法、字符串的切片和索引，以及字符串的幾種常用方法。

1. 變量

Python中的變很好理解，例如：

a = 1

這種操作稱為賦值，意思為將數值1賦給了變量a。

注意：Python中語句結束不需要以分號結束，變量不需要提前定義。

現在有變量a和變量b，可以通過下面代碼進行變量a、b值的對換。

這種方法類似於將兩個杯子中的飲料對換，只需要多加一個杯子，即可完成飲料的對換工作。

2. 字符串的“加法”和“乘法”

由於Python爬蟲的對象大部分為文本，所以字符串的用法尤為重要。在Python中，字符串由雙引號或單引號和引號中的字符組成。首先，通過下面代碼看看字符串的“加法”：

在爬蟲代碼中，會經常構造URL，例如，在爬取一個網頁鏈接時，只有一部分/u/9104ebf5e177，這部分鏈接是無法訪問的，還需要http://www.jianshu.com，這時可以通過字符串的“加法”進行合併。

注意：此網站為筆者的簡書首頁。

Python的字符串不僅可以相加，也可以乘以一個數字：

字符串乘以一個數字，意思就是將字符串複製這個數字的份數。

3. 字符串的切片和索引

字符串的切片和索引就是通過string[x]，獲取字符串的一部分信息：

通過圖1.3就能清楚地理解字符串的切片和索引。

圖1.3 字符串切片和索引

注意：a[0:5]中的第5個是不會選擇的。

在爬蟲實戰中，經常會通過字符串的切片和索引，提取需要的部分，剔除一些不需要的部分。

4. 字符串方法

Python作為面向對象的語言，每個對象都有相應的方法，字符串也一樣，擁有多種方法，在這裡介紹爬蟲技術中常用的幾種方法。

4.1 split()方法

字符串的split()方法就是通過給定的分隔符（在這裡為‘.’），將一個字符串分割為一個列表（後面將詳細講解列表）。

注意：如果沒有提供任何分隔符，程序會把所有的空格作為分隔符（空格、製表、換行等）。

4.2 repalce()方法

這種方法類似文本中的“查找和替換”功能。

4.3 strip()方法

strip()方法返回去除兩側（不包括內部）空格的字符串，也可以指定需要去除的字符，將它們列為參數中即可。

這個方法只能去除兩側的字符，在爬蟲得到的文本中，文本兩側常會有多餘的空格，只需使用字符串的strip()方法即可去除多餘的空格部分。

4.4 format()方法

最後，再講解下好用的字符串格式化符，首先看以下代碼：

字符串格式化符就像是做選擇題，留了空給做題者選擇。在爬蟲過程中，有些網頁鏈接的部分參數是可變的，這時使用字符串格式化符可以減少代碼的使用量。

例如，Pexels素材網（https://www.pexels.com/），當搜索圖片時，網頁鏈接也會發生變化。

如在搜索欄中輸入book，網頁跳轉為https://www.pexels.com/search/book/，可以設計如下代碼，筆者只需輸入搜索內容，便可返回網頁鏈接。

運行程序並輸入book，便可返回網頁鏈接，單擊網頁鏈接便可訪問網頁了，如圖1.4所示。

圖1.4 字符串格式化符演示

03 函數與控制語句

本節主要介紹Python()函數的定義與使用方法，介紹Python的判斷和循環兩種爬蟲技術中常用的控制語句。

1. 函數

“髒活累活交給函數來做”，首先，看看Python中定義函數的方法。

製作一個輸入直角邊就能計算出直角三角形的面積函數：

注意：讀者不需要太糾結二者的區別，用return是返回一個值，而第二個是調用函數執行打印功能。

通過輸入function(2,3)，便可以調用函數，計算直角邊為2和3的直角三角形的面積。現在來做一個綜合練習：讀者都知道網上公佈的電話號碼，如156****9354，中間的數值用其他符號代替了，而用戶輸入手機號時卻是完整地輸入，下面就通過Python()函數來實現這種轉換功能。

注意：這裡的手機號碼是隨意輸入的，不是真實的號碼。

代碼說明如下：

定義了一個名為change_number的函數。

對輸入的參數進行切片，把參數的[3:7]部分替換為‘*’號，並打印出來。

調用函數。

2. 判斷語句

在爬蟲實戰中也會經常使用判斷語句，Python的判斷語句格式如下：

在平時使用密碼時，輸入的密碼正確即可登錄，密碼錯誤時就需要再次輸入密碼。

程序說明如下：

運行程序，輸入密碼後按Enter鍵。

如果輸入的字符串為12345，則打印“輸入成功！”，程序結束。

如果輸入的字符串不是12345，則打印“錯誤，再輸入”，繼續運行程序，直到輸入正確為止。

讀者也可以將程序設計得更為有趣，例如，“3次輸入失敗後，退出程序”等。

3. 循環語句

Python的循環語句包括for循環和while循環，代碼如下：

例如，設計一個小程序，計算1～100的和：

04 Python數據結構

數據結構是存放數據的容器，本節主要講解Python的4種基本數據結構，即列表、字典、元組和集合。

1. 列表

在爬蟲實戰中，使用最多的就是列表數據結構，不論是構造出的多個URL，還是爬取到的數據，大多數都為列表數據結構。下面首先介紹列表最顯著的特徵：

列表中的每一個元素都是可變的。

列表的元素都是有序的，也就是說每個元素都有對應的位置（類似字符串的切片和索引）。

列表可以容納所有的對象。

列表中的每個元素都是可變的，這意味著可以對列表進行增、刪、改操作，這些操作在爬蟲中很少使用，因此這裡不再給讀者添加知識負擔。

列表的每個元素都有對應的位置，這種用法與字符串的切片和索引很相似。

如果為切片，返回的也是列表的數據結構。

列表可以容納所有的對象：

列表中會經常用到多重循環，因此讀者有必要去了解和使用多重循環。現在，擺在讀者面前有兩個列表，分別是姓名和年齡的列表：

這時可以通過多重循環讓name和age同時打印在屏幕上：

注意：多重循環前後變量要一致。

在爬蟲中，經常請求多個網頁，通常情況下會把網頁存到列表中，然後循環依次取出並訪問爬取數據。這些網頁都有一定的規律，如果是手動將這些網頁URL存入到列表中，不僅花費太多時間，也會造成代碼冗餘。這時可通過列表推導式，構造出這樣的列表，例如某個網站每頁的URL是這樣的（一共13頁）：

http://bj.xiaozhu.com/search-duanzufang-p1-0/

http://bj.xiaozhu.com/search-duanzufang-p2-0/

http://bj.xiaozhu.com/search-duanzufang-p3-0/

http://bj.xiaozhu.com/search-duanzufang-p4-0/

……

通過以下代碼即可構造出13頁URL的列表數據：

通過一行代碼即可構造出來，通過for循環打印出每個URL，如圖1.5所示。

圖1.5 列表推導式構造URL列表

注意：本網站為小豬短租網。

2. 字典

Python的字典數據結構與現實中的字典類似，以鍵值對（'key'-'value'）的形式表現出來。本文中只講解字典的創造，字典的操作在後面會詳細介紹。字典的格式如下：

注意：插入MongoDB數據庫需用字典結構。

3. 元組和集合

在爬蟲中，元組和集合很少用到，因此這裡只做簡單介紹。元組類似於列表，但是元組的元素不能修改只能查看，元組的格式如下：

tuple = (1,2,3)

集合的概念類似數學中的集合。每個集合中的元素是無序的，不可以有重複的對象，因此可以通過集合把重複的數據去除。

注意：集合是用大括號構建的。

05 Python文件操作

在爬蟲初期的工作中，常常會把數據存儲到文件中。本節主要講解Python如何打開文件和讀寫數據。

1. 打開文件

Python中通過open()函數打開文件，語法如下：

open(name[, mode[, buffering]])

open()函數使用文件名作為唯一的強制參數，然後返回一個文件對象。模式（mode）和緩衝（buffering）是可選參數。在Python的文件操作中，mode參數的輸入是有必要的，而buffering使用較少。

如果在本機上有名為file.txt的文件（讀者可以在本機中新建一個文本文件），其存儲路徑為C:\\Users\\Administrator\\Desktop，那麼可以通過下面代碼打開文件：

f = open('C:/Users/Administrator/Desktop/file.txt')

注意：此代碼為Windows系統下的路徑寫法。

如果文件不存在，則會出現如圖1.6所示的錯誤。

圖1.6 文件不存在報錯信息

如果open()函數只是加入文件的路徑這一個參數，則只能打開文件並讀取文件的相關內容。如果要向文件中寫入內容，則必須加入模式這個參數了。下面首先來看看open()函數中模式參數的常用值，如表1.1所示。

表1.1 open()函數中模式參數的常用值

2. 讀寫文件

上一節中有了名為f的類文件對象，那麼就可以通過f.write()方法和f.read()方法寫入和讀取數據了。

f = open('C:/Users/Administrator/Desktop/file.txt','w+')

f.write('hello world')

這時，在本機上打開file.txt文件，可以看到如圖1.7所示的結果。

圖1.7 Python寫文件

注意：如果沒有建立文件，運行上面代碼也可以成功。

如果再次運行程序，txt文件中的內容不會繼續添加，可以修改模式參數為'r+'，便可一直寫入文件。

Python讀取文件通過read()方法，下面嘗試把f的類文件對象寫入的數據讀取出來，使用如下代碼即可完成操作：

3. 關閉文件

當完成讀寫工作後，應該牢記使用close()方法關閉文件。這樣可以保證Python進行緩衝的清理（出於效率考慮而把數據臨時存儲在內存中）和文件的安全性。通過下面代碼即可關閉文件。

06 Python面向對象

Python作為一個面向對象的語言，很容易創建一個類和對象。本節主要講解類的定義及其相關使用方法。

1. 定義類

類是用來描述具有相同屬性和方法的對象集合。人可以通過不同的膚色劃分為不同的種族，食物也有不同的種類，商品也是形形色色。但劃分為同一類的物體，肯定具有相似的特徵和行為方式。

對於同一款自行車而言，它們的組成結構都是一樣的，如車架、車輪和腳踏板等。通過Python可以定義這個自行車的類：

class Bike:

compose = ['frame','wheel','pedal']

通過使用class定義一個自行車的類，類中的變量compose稱為類的變量，專業術語為類的屬性。這樣，顧客購買的自行車組成結構就是一樣的了。

my_bike = Bike()

結果如圖1.8所示。

圖1.8 類屬性引用

在左邊寫上變量名，右邊寫上類的名稱，這個過程稱之為類的實例化，而my_bike就是類的實例。通過“.”加上類的屬性，就是類屬性的引用。類的屬性會被類的實例共享，所以結果都是一樣的。

2. 實例屬性

對於同一款自行車來說，有些顧客買回去後會改造下，如加一個車筐可以放東西等。

結果如圖1.9所示。

▲圖1.9 實例屬性

說明：通過給類的實例屬性進行賦值，也就是實例屬性。compose屬性屬於所有的該款自行車，而other屬性只屬於my_bike這個類的實例。

3. 實例方法

讀者是否還記得字符串的format()方法。方法就是函數，方法是對實例進行使用的，所以又叫實例方法。對於自行車而言，它的方法就是騎行。

結果如圖1.10所示。

圖1.10 實例方法

注意：這裡的self參數就是實例本身。

和函數一樣，實例方法也是可以有參數的。

結果如圖1.11所示。

圖1.11 實例方法多參數

Python的類中有一些“魔法方法”，_init_()方法就是其中之一。在我們創造實例的時候，不需要引用該方法也會被自動執行。

結果如圖1.12所示。

圖1.12 魔術方法

4. 類的繼承

共享單車的出現，方便了人們的出行。共享單車和原來的自行車組成結構類似，但多了付費的功能。

結果如圖1.13所示。

圖1.13 類的繼承

在新的類Share_bike後面的括號中加入Bike，表示Share_bike繼承了Bike父類。父類中的變量和方法可以完全被子類繼承，在特殊情況下，也可以對其覆蓋。

最後：學習Python的有用資源

好像大家都有一個毛病，就是到處蒐集資源，雲盤裡有很多東西，但是基本是從來都不看，所以說視頻在精不在於多，我當時自學python的時候也蒐集了各種視頻，這裡看看，那裡看看，學的一點都不繫統，而且學了之後也找不到工作，視頻一定要最新的，python更新的快，舊的是不可以的。小編給大家分享一套2019年7月份最新的python視頻教程，共400集，帶你從入門到達手寫網絡神經的地步，

領取方式：轉發本文，

然後來私信小編“python”即可免費獲取這套教程和電子書籍啦！

"

相關推薦

'30周Java學習計劃清單，分享神級教程帶你飛！確定不整一波？'

"我一直相信：一切不能實實在在幫助到大家的資料，都是耍流氓我的目標是： 做一次又一次真正有價值、愉悅感十足的分享Java+大數據+互聯網架構，不斷深入前沿領域學習Java，首先要學JavaSE，這是毋庸置疑的。與此同時，和JavaSE的學習同步，建議大家研究一下數據結構與算...

Java 算法 數據結構 程序員 Eclipse 人生第一份工作 設計 編程語言 技術 設計模式 Apache 讀書 大數據 小遊戲 集成開發環境 2019-09-18

'Linux操作監控系統，實用命令分享，歡迎補充！附教程+思維導圖'

"操作系統是由一系列用於不同目的，服務不同人物的系統軟件組成，隨著Linux越來越流行，對Linux操作系統的一些基礎的監控與操作越來越重要。小編為你準備了高頻個Linux使用指南和linux學習思維導圖和教程受篇幅 限制文中只展示部分可分享的面試資源圖片，更多面試資料獲取...

Linux 操作系統 跳槽那些事兒 2019-09-18

'用Python實現進制轉換，這一篇教程就夠了！這也太完美了'

"前言Python 實現進制轉換一、導言導語：在計算機進行數據交換時，常常會有一個進制轉換的過程，我們知道計算機只認0 和 1.在內存系統中，基本基於二進制進行運算的，但是有時候數據過於龐大，為了方便存儲管理，計算機會使用十六進制存儲數據，但是怎麼實現數據轉換呢？我們人類由...

Python 電腦 C語言 腳本語言 工程師 迪吉多 2019-09-18

'Photoshop CC2019安裝包免費下載附安裝教程'

"一、軟件簡介：Adobe Photoshop CC 2019是一款號稱是Adobe公司歷史上最大規模的一次產品升級，集圖像掃描、編輯修改、圖像製作、廣告創意，圖像輸入與輸出於一體的圖形圖像處理軟件，深受廣大平面設計人員和電腦美術愛好者的喜愛。 【Photoshop CC ...

Photoshop 軟件 Adobe Systems 電腦 平面設計 技術 殺毒軟件 2019-09-18

'Python學習乾貨 史上最全的 Python 爬蟲工具列表大全'

"這個列表包含與網頁抓取和數據處理的Python庫。網絡通用urllib -網絡庫(stdlib)。requests -網絡庫。grab – 網絡庫（基於pycurl）。pycurl – 網絡庫（綁定libcurl）。urllib3 – Python HTTP庫，安全連接池...

Python 網絡爬蟲 HTML Scrapy XML 瀏覽器 CSS XHTML jQuery C語言 JSON Excel 可視化技術 2019-09-15

'Python基礎學習教程系列講解——try_except異常處理機制'

"在Python編程中不可避免的會出現錯誤，在調試階段出現語法之類的錯誤時，Pycharm會在Debug窗口提示錯誤，但是程序在運行時由於內部隱含的問題而引起錯誤，會導致程序終止執行。比如以下例程中，使用urllib庫打開URL時由於網絡問題而發生了錯誤：import ur...

Python PyCharm 2019-09-15

'用Python控制Excel實現自動化辦公！附全套學習教程'

"1.安裝2.操作一個簡單的Excel文檔操作註釋及代碼：操作完成後，數據存儲結果如下：3. 操作簡單Excel文檔並添加數據格式操作代碼如下：附帶數據格式的定義操作效果如圖所示：4.Excel中添加不同類型的數據操作代碼如下：將不同的數據按照指定的格式添加到文件中代碼執行...

Excel Python 2019-09-15

'他只靠Python就找到了一份年薪50W的工作，有了這套教程你也可以'

"Python現在非常火，語法簡單而且功能強大，很多同學都想學Python！所以小的給各位看官們準備了高價值Python學習視頻教程及相關電子版書籍，歡迎前來免費領取！1我沒在超大型公司待過，但是作為一個python愛好者和使用者，簡單說一下自己的想法。（1）一定要掌握計算...

Python 英語 技術 電腦 Git 算法 多看閱讀 人生第一份工作 數學 Linux 數據庫 數據結構 HTML5 Vim 上海 網絡爬蟲 北上廣 操作系統 JavaScript 數據挖掘 網易有道 軟件工程 2019-09-14

'python之父：零基礎學python如何不走彎路！這套教程清單收好'

"1.Python的設計目標1999年，吉多*範羅蘇姆向DARPA提交了一條名為”Computer Programming For Everybody”的資金申請，並在後來說明了他對Python的目標：1.一門簡單直觀的語言並與主要競爭者一樣強大2.開源，以便任何人都可以為...

Python 設計 機器學習 數據庫 Java 工程師 人工智能 算法 2019-09-14

'Flex 佈局教程：語法篇'

"作者： 阮一峰日期： 2015年7月10日網頁佈局（layout）是 CSS 的一個重點應用。佈局的傳統解決方案，基於盒狀模型，依賴 display 屬性 + position屬性 + float屬性。它對於那些特殊佈局非常不方便，比如，垂直居中就不容易實現。2009年，...

WebKit FLOW 瀏覽器 CSS Safari 2019-09-12

'易語言5.9完整破解版編程軟件免費下載附安裝教程'

"易語言5.9是一款專為國人而設計的編程軟件。該款編程軟件的誕生，大大的降低了廣大的電腦用戶的編程門檻，讓那些想編程且又不會英文的朋友們，提供了一條快速進入Windows程序編程的大門，而作為我們這些用易語言編程的人們，也不用理解那些看起來賊長且難記的英文API文檔，只需通...

易語言 軟件 數據庫 編譯器 設計 技術 程序設計 可視化技術 英語 Linux Windows 操作系統 輸入法 編程語言 Java 知識產權 電腦 中央處理器 2019-09-12

'寫python爬蟲，不會正則怎麼行呢？另贈學習資料'

"導讀：正則在各語言中的使用是有差異的，本文以 Python 3 為基礎。本文主要講述的是正則的語法，對於 re 模塊不做過多描述，只會對一些特殊地方做提示。很多人覺得正則很難，在我看來，這些人一定是沒有用心。其實正則很簡單，根據二八原則，我們只需要懂 20% 的內容就可以...

Python 網絡爬蟲 Java 百度 2019-09-12

'他畢業於麻省理工學院，4年的Python學習教程大彙總 無償分享出來'

"什麼是Python？眾所周知，小學生教程裡面已經有Python了，國家二級計算機證也需要學習Python！因為Python簡單、入門快速，是不少學編程語言初學者的首選隨著時間發展，Python主要有一下5大用途Python能做什麼？1、web開發（月薪：10k—15k，平...

Python 讀書 人工智能 麻省理工學院 Linux 面向對象程序編程 網絡爬蟲 數據庫 編程語言 程序員 設計 技術 硬件 分佈式計算 操作系統 算法 電腦 2019-09-09

'python之父：零基礎學python，如何學習最為快速？這套教程請收好'

"1.Python的設計目標1999年，吉多*範羅蘇姆向DARPA提交了一條名為”Computer Programming For Everybody”的資金申請，並在後來說明了他對Python的目標：1.一門簡單直觀的語言並與主要競爭者一樣強大2.開源，以便任何人都可以為...

Python 設計 機器學習 數據庫 Java 工程師 人工智能 算法 2019-09-09

'學做一名成功的Python全棧開發工程師，附教程'

"一、瞭解Python----流行編程語言全球前四大流行語言之一根據TIOBE最新排名 ，Python已超越C#，與Java,C,C++一起成為全球前4大最流行語言應用幾乎無限制Python被廣泛應用於後端開發、遊戲開發、網站開發、科學運算、大數據分析、雲計算，圖形開發等領...

Python 工程師 技術 大數據 Java 編程語言 人生第一份工作 Linux 網絡爬蟲 程序員 雲計算 數據庫 Facebook C語言 人工智能 SQL 創業 2019-09-09

'零基礎自學python，如何學習最為快速？阿里大佬：這套教程請收好'

"1.Python的設計目標1999年，吉多*範羅蘇姆向DARPA提交了一條名為”Computer Programming For Everybody”的資金申請，並在後來說明了他對Python的目標：1.一門簡單直觀的語言並與主要競爭者一樣強大2.開源，以便任何人都可以為...

Python 設計 機器學習 數據庫 Java 算法 工程師 人工智能 2019-09-07

'開學季最受歡迎的Python教程，你和別人的差距可能就是這份教程'

"為什麼學習Python？Python 是一門兼具簡單與功能強大的編程語言，它專注於如何解決問題、自由開放的社區環境以及豐富的第三方庫，無需浪費時間去造輪子，各種Web框架、爬蟲框架、數據分析框架、機器學習框架應有盡有，拿來即用，如果你不知道去哪找第三庫，可以看看 awes...

Python 工程師 Go語言 開學季 算法 人工智能 Android 程序員 數據結構 UNIX Kotlin iOS Java 機器學習 C語言 Google 信息安全 人生第一份工作 網絡爬蟲 編程語言 算術 海龜 硬件 物理 2019-09-07

推薦中...