詳解用selenium來下載小姐姐圖片并保存

更新時間：2021年01月26日 09:30:25 作者：封妖師的徒弟

這篇文章主要介紹了詳解用selenium來下載小姐姐圖片并保存，文中通過示例代碼介紹的非常詳細，對大家的學習或者工作具有一定的參考學習價值，需要的朋友們下面隨著小編來一起學習學習吧

下載小姐姐圖片并保存

請求的地址
偽裝
定位元素
下載圖片
保存好了

下面開始我們的實戰(zhàn)，這個是我們今天訪問的url：

url = 'http://pic.netbian.com/4kmeinv/'

1，先把包給導進來：

import requests
from selenium.webdriver import Chrome,ChromeOptions
import os

不知道怎么導包的看我的第一篇，附上鏈接：
http://chabaoo.cn/article/204774.htm

2，接下來就開始發(fā)送請求

 #請求的url
 url = 'http://pic.netbian.com/4kmeinv/'
 #進行偽裝
 headers = {
 "User_Agent":"Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/87.0.4280.141 Safari/537.36"
 }
 #發(fā)起請求
 response = requests.get(url=url,headers=headers)
 #手動設定響應數(shù)據(jù)的編碼格式
 response.encoding = 'utf-8'
 page_text = response.text
 #這個就是再后臺上面運行那個瀏覽器，不在表面上占用你的
 option = ChromeOptions()
 option.add_argument('--headless')
 option.add_argument("--no-sandbox")
 option.add_experimental_option('excludeSwitches',['enable-automation'])
 #這里也要輸入
 browser = Chrome(options=option)
 browser.get(url)

相信看過我上篇的都知道這些，那就廢話不多說，定位元素：

3，定位：

先看下代碼再說：

 li = browser.find_elements_by_xpath('//*[@id="main"]/div[3]/ul/li')

老樣子，分為三步，第一步選中所選的圖片–>copy xpath–>ctrl+f -->粘貼進去可以看到是1of1，但明顯我們要的是這個頁面上所有的圖片，所以呀，只需要改一下就可以啦，將tr[1]，里面的包括括號刪掉就可以。

這樣的話就是整個頁面內(nèi)所有的圖片啦，

在這里插入圖片描述

4，創(chuàng)建文件以保存我們所要的圖片：

 #創(chuàng)建一個文件夾
 if not os.path.exists('./小美女圖'):
 os.mkdir('./小美女圖')

然后再循環(huán)一下就好啦：

 for i in li:
 img_src = i.find_element_by_xpath('./a/img').get_attribute('src')
 img_name = i.find_element_by_xpath('./a/img').get_attribute('alt')+'.jpg'

至于為什么要這么寫，可以看一下我的上一篇博客：

http://chabaoo.cn/article/204771.htm

5，保存

 img_data = requests.get(url=img_src,headers=headers).content
 img_path = '小美女圖/'+img_name
 with open(img_path,'wb') as fp:
  fp.write(img_data)
  print(img_name,'下載成功?。。?)

最后的結(jié)果哈哈哈哈：這個也不存在什么圖片尺寸過大啥的，如果錯了，多半是你元素沒有定位好。

在這里插入圖片描述