python中xpath爬蟲實例詳解-創(chuàng)新互聯(lián)

案例一：

創(chuàng)新互聯(lián)專注于共和網(wǎng)站建設服務及定制，我們擁有豐富的企業(yè)做網(wǎng)站經(jīng)驗。 熱誠為您提供共和營銷型網(wǎng)站建設，共和網(wǎng)站制作、共和網(wǎng)頁設計、共和網(wǎng)站官網(wǎng)定制、微信平臺小程序開發(fā)服務，打造共和網(wǎng)絡公司原創(chuàng)品牌,更為您提供共和網(wǎng)站排名全網(wǎng)營銷落地服務。

某套圖網(wǎng)站，套圖以封面形式展現(xiàn)在頁面，需要依次點擊套圖，點擊廣告盤鏈接，最后到達百度網(wǎng)盤展示頁面。

這一過程通過爬蟲來實現(xiàn)，收集百度網(wǎng)盤地址和提取碼，采用xpath爬蟲技術

1、首先分析圖片列表頁，該頁按照更新先后順序暫時套圖封面，查看HTML結構。每一組“l(fā)i”對應一組套圖。屬性href后面即為套圖的內頁地址（即廣告盤鏈接頁）。所以，我們先得獲取列表頁內所有的內頁地址（即廣告盤鏈接頁）

代碼如下：

import requests 倒入requests庫
from lxml import etree 倒入lxml 庫（沒有這個庫，pip install lxml安裝）
url = "https://www.xxxx.com/gc/" 請求地址
response = requests.get(url= url) 返回結果
wb_data = response.text 文本展示返回結果
html = etree.HTML(wb_data) 將頁面轉換成文檔樹
b = html.xpath('//ul[@class = "clearfix"]//@href') 這一步的意思是class“clearfix”下所有屬性為“href”賦值給“b”，因為我們的目標內容都展示在class“clearfix”下，且在href屬性后面
print(b) 打印b，這里的b是一個數(shù)組
print(b[0]) 打印b的第一項數(shù)據(jù)

另外有需要云服務器可以了解下創(chuàng)新互聯(lián)scvps.cn，海內外云服務器15元起步，三天無理由+7*72小時售后在線，公司持有idc許可證，提供“云服務器、裸金屬服務器、高防服務器、香港服務器、美國服務器、虛擬主機、免備案服務器”等云主機租用服務以及企業(yè)上云的綜合解決方案，具有“安全穩(wěn)定、簡單易用、服務可用性高、性價比高”等特點與優(yōu)勢，專為企業(yè)上云打造定制，能夠滿足用戶豐富、多元化的應用場景需求。

當前題目：python中xpath爬蟲實例詳解-創(chuàng)新互聯(lián)
地址分享：http://muchs.cn/article32/dchisc.html

成都網(wǎng)站建設公司_創(chuàng)新互聯(lián)，為您提供虛擬主機、微信小程序、App開發(fā)、營銷型網(wǎng)站建設、網(wǎng)站策劃、手機網(wǎng)站建設

廣告

聲明：本網(wǎng)站發(fā)布的內容（圖片、視頻和文字）以用戶投稿、用戶轉載內容為主，如果涉及侵權請盡快告知，我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場，如需處理請聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內容未經(jīng)允許不得轉載，或轉載時需注明來源： 創(chuàng)新互聯(lián)