python3爬取看着不咳嗽的图片

赤魂煌

1. # UTF-8
   
2. # author wangyeuwen
   
3. 
   
4. import requests
   
5. from bs4 import BeautifulSoup
   
6. import os
   
7. 
   
8. headers = {
   
9.     'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/85.0.4183.102 Safari/537.36 Edg/85.0.564.51',
   
10.     'Accept': 'text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3;q=0.9',
    
11.     'Accept-Encoding': 'gzip, deflate'
    
12. }
    
13. path = input('输入图片保存路径:')
    
14. if not(os.path.exists(path)):
    
15.     os.mkdir(path) #创建文件夹爱
    
16.     print('路径不存在，已创建路径')
    
17. 
    
18. count = 25 #总页数
    
19. print('=========初始化成功，开始爬取=========')
    
20. for c in range(1,count+1):
    
21.     os.chdir(path)  # 设置文件夹
    
22.     url = 'http://tp.wcctv.top/index.php/page/{0}/'.format(c)
    
23.     resphonse1 = requests.get(url, headers=headers)
    
24.     html_soup1 = BeautifulSoup(resphonse1.text, 'lxml')  # 解析网页
    
25.     for i in range(0,6):
    
26.         img_dir = html_soup1.select('.item img')[i].get('alt')
    
27.         os.chdir(path)  # 设置文件夹
    
28.         os.mkdir(img_dir)
    
29.         os.chdir(path+'/'+img_dir)
    
30.         img_url = html_soup1.select('.item a')[i].get('href') #获取当前页面的url
    
31.         resphonse2 = requests.get(img_url,headers=headers)
    
32.         html_soup2 = BeautifulSoup(resphonse2.text,'lxml')
    
33.         all_img = html_soup2.select('.post-item-img')
    
34.         for x in range(0,len(all_img)):
    
35.             img = requests.get(all_img[x].get('src'),headers=headers)
    
36.             f = open(all_img[x].get('title') + '.jpg', 'ab')
    
37.             f.write(img.content)
    
38.             print(all_img[x].get('title')+'  下载成功！')
    
39.             f.close()

复制代码

违心的牛

6666666666

滑翔的小竹鼠

谢谢大牛

menghuanxiyou

好的，非常感谢

ljc

谢谢分享

zb1314520

6666

fashioned

感谢楼主分享

ETS61

感谢楼主分享！大牛有你更精彩！

as310739216

谢谢大佬