行业网站建站,佳木斯做网站,wordpress主题没法用,模板出售网站源码文章目录 一、书籍推荐二、完整代码三、运行结果 一、书籍推荐
推荐本人书籍《Python网络爬虫入门到实战》 #xff0c;详细介绍见#x1f449;#xff1a; 《Python网络爬虫入门到实战》 书籍介绍
二、完整代码
原理#xff1a;抓取该链接中所有的图片格式。基于seleni… 文章目录 一、书籍推荐二、完整代码三、运行结果 一、书籍推荐
推荐本人书籍《Python网络爬虫入门到实战》 详细介绍见 《Python网络爬虫入门到实战》 书籍介绍
二、完整代码
原理抓取该链接中所有的图片格式。基于selenium来获取自动下载到output文件夹中。
from selenium import webdriver
import requests as rq
import os
from bs4 import BeautifulSoup
import time# Enter Path : chromedriver.exe
# Enter URL : http://www.netbian.com/meinv/index_2.htmpath input(Enter Path : )
url input(Enter URL : )
output outputdef get_url(path, url):driver webdriver.Chrome(executable_pathr{}.format(path))driver.get(url)print(loading.....)res driver.execute_script(return document.documentElement.outerHTML)return resdef get_img_links(res):soup BeautifulSoup(res, lxml)imglinks soup.find_all(img, srcTrue)return imglinksdef download_img(img_link, index):try:extensions [.jpeg, .jpg, .png, .gif]extension .jpgfor exe in extensions:if img_link.find(exe) 0:extension exebreakimg_data rq.get(img_link).contentwith open(output \\ str(index 1) extension, wb) as f:f.write(img_data)f.close()except Exception:passresult get_url(path, url)
time.sleep(60)
img_links get_img_links(result)
if not os.path.isdir(output):os.mkdir(output)
for index, img_link in enumerate(img_links):img_link img_link[src]print(Downloading...)if img_link:download_img(img_link, index)
print(Download Complete!!)
三、运行结果
如下所示
