Python怎么批量爬取糗事百科短視頻

本篇內(nèi)容主要講解“Python怎么批量爬取糗事百科短視頻”，感興趣的朋友不妨來看看。本文介紹的方法操作簡單快捷，實用性強。下面就讓小編來帶大家學習“Python怎么批量爬取糗事百科短視頻”吧!

創(chuàng)新互聯(lián)專注于太倉網(wǎng)站建設(shè)服務(wù)及定制，我們擁有豐富的企業(yè)做網(wǎng)站經(jīng)驗。 熱誠為您提供太倉營銷型網(wǎng)站建設(shè)，太倉網(wǎng)站制作、太倉網(wǎng)頁設(shè)計、太倉網(wǎng)站官網(wǎng)定制、成都微信小程序服務(wù)，打造太倉網(wǎng)絡(luò)公司原創(chuàng)品牌,更為您提供太倉網(wǎng)站排名全網(wǎng)營銷落地服務(wù)。

本次目標

爬取糗事百科視頻

地址

https://www.qiushibaike.com/video/

環(huán)境

Python3.6

pycharm

分析網(wǎng)頁獲取視頻真實地址

1、鼠標右鍵點擊檢查，可以看到網(wǎng)頁中是有視頻地址~

2、鼠標右鍵點擊查看源代碼，搜索視頻地址查看網(wǎng)頁源代碼是否也有視頻地址

糗事百科是一個靜態(tài)網(wǎng)頁，對于爬取網(wǎng)站視頻還是比較簡單的~

爬蟲代碼

導(dǎo)入工具

import requests
import re
import time

請求網(wǎng)站

url = 'https://www.qiushibaike.com/video/page/{}/'.format(page)
headers = {
    'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/81.0.4044.138 Safari/537.36'
}
response = requests.get(url=url, headers=headers)

解析網(wǎng)站

    for li in lis:
        video_url = 'https:' + li
        title = li.split('/')[-1]
        download(video_url, title)

保存數(shù)據(jù)

def download(url, title):
    path = '保存數(shù)據(jù)地址' + title
    response = requests.get(url=url)
    with open(path, mode='wb') as f:
        f.write(response.content)

運行代碼，結(jié)果如下圖

到此，相信大家對“Python怎么批量爬取糗事百科短視頻”有了更深的了解，不妨來實際操作一番吧！這里是創(chuàng)新互聯(lián)網(wǎng)站，更多相關(guān)內(nèi)容可以進入相關(guān)頻道進行查詢，關(guān)注我們，繼續(xù)學習！

分享文章：Python怎么批量爬取糗事百科短視頻
本文地址：http://muchs.cn/article30/ispdso.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供外貿(mào)網(wǎng)站建設(shè)、搜索引擎優(yōu)化、營銷型網(wǎng)站建設(shè)、外貿(mào)建站、手機網(wǎng)站建設(shè)、網(wǎng)頁設(shè)計公司

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請盡快告知，我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場，如需處理請聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時需注明來源： 創(chuàng)新互聯(lián)