Python 給我一個鏈接西瓜視頻隨便下載爬蟲

更新時間：2021年08月25日 16:34:34 作者：il_持之以恒_li

這篇文章主要介紹了Python通過一個鏈接爬取西瓜視頻，本文給大家介紹的非常詳細，對大家的學習或工作具有一定的參考借鑒價值，需要的朋友可以參考下

請?zhí)砑訄D片描述

1.實現(xiàn)原理

首先，我們需要來到西瓜視頻的官網，鏈接為：西瓜視頻，隨便點擊其中一個視頻進入，點擊電腦鍵盤的F12來到開發(fā)者模式，按ctrl+F進行搜索，輸入video，如下：

請?zhí)砑訄D片描述

我們可以發(fā)現(xiàn)，這里有一個視頻鏈接，我們點擊這個鏈接進入，依舊按電腦F12鍵來到開發(fā)者模式，繼續(xù)搜索video，可以發(fā)現(xiàn)，這里直接有視頻的下載鏈接，如下：

請?zhí)砑訄D片描述

我們是不是只要運用代碼就可以找到視頻的下載鏈接呢？不過，由于上述圖片這些視頻下載鏈接是動態(tài)加載的，這里需要用到selenium模塊哈！不懂這個模塊的讀者可以看看小編之前寫的博客哈！這里小編給出一篇博客，博客鏈接為：selenium模塊太強大了，網易云音樂都可下載

請?zhí)砑訄D片描述

2.程序代碼

程序代碼如下：

import re
from selenium import webdriver


# url="https://www.ixigua.com/6982149651281478152?logTag=cc6bf98fd0f8fe35fe0e"
url=input("輸入視頻鏈接：")
group_id=re.findall('https://www.ixigua.com/(.*)\?logTag=.*',url)
url='https://www.ixigua.com/embed?group_id='+group_id[0]

# 進入瀏覽器設置
options = webdriver.ChromeOptions()
# 設置中文
options.add_argument('lang=zh_CN.UTF-8')
# 更換頭部
options.add_argument('user-agent="Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/79.0.3945.130 Safari/537.36"')

driver=webdriver.Chrome(options=options)
driver.get(url=url)
driver.implicitly_wait(5)
infos=driver.find_elements_by_xpath("http://xg-definition/ul/li")
for info in infos[:-1]:
    print(info.get_attribute("definition"))
    print('http:'+info.get_attribute("url"))