Python爬蟲教程：爬取某平臺短視頻的方法~

這篇文章主要介紹了Python爬取某平臺短視頻的方法,本文給大家介紹的非常詳細(xì)，對大家的學(xué)習(xí)或工作具有一定的參考借鑒價值，需要的朋友可以參考下

前言

本文的文字及圖片來源于網(wǎng)絡(luò),僅供學(xué)習(xí)、交流使用,不具有任何商業(yè)用途,如有問題請及時聯(lián)系我們以作處理。

基本開發(fā)環(huán)境

Python 3.6

Pycharm

相關(guān)模塊的使用

import os
import requests

安裝Python并添加到環(huán)境變量，pip安裝需要的相關(guān)模塊即可。

一、確定需求

爬取搞笑趣味欄目的視頻內(nèi)容。

二、網(wǎng)站數(shù)據(jù)分析

首先需要明確一點，好看視頻網(wǎng)站加載方式是懶加載的方式，需要你下滑網(wǎng)頁才會加載出新的內(nèi)容

加載出來的內(nèi)容里面有音頻播放地址以及標(biāo)題。

內(nèi)容比較簡單，看代碼就行

import os
import requests
 
url = 'https://haokan.baidu.com/videoui/api/videorec?tab=gaoxiao&act=pcFeed&pd=pc&num=20&shuaxin_id=1612592171486'
headers = {
'user-agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/81.0.4044.138 Safari/537.36'
}
response = requests.get(url=url, headers=headers)
json_data = response.json()
videos = json_data['data']['response']['videos']
for index in videos:
title = index['title']
play_url = index['play_url']
video_content = requests.get(url=play_url, headers=headers).content
path = 'video\\'
if not os.path.exists(path):
os.mkdir(path)
with open(path + title + '.mp4', mode='wb') as f:
f.write(video_content)
print('正在保存：', title)

到此這篇關(guān)于Python爬取某平臺短視頻的方法的文章就介紹到這了！

搜索下方加老師微信

老師微信號：XTUOL1988【切記備注：學(xué)習(xí)Python】

領(lǐng)取Python web開發(fā)，Python爬蟲，Python數(shù)據(jù)分析，人工智能等精品學(xué)習(xí)課程。帶你從零基礎(chǔ)系統(tǒng)性的學(xué)好Python！

*聲明：本文于網(wǎng)絡(luò)整理，版權(quán)歸原作者所有，如來源信息有誤或侵犯權(quán)益，請聯(lián)系我們刪除或授權(quán)