封号斗罗 发表于 2021-3-17 07:59

爬取美女图片

import requests
import re
import time
import os

# url = 'https://www.vmgirls.com/13344.html'

def get_pic(url):
    headers = {
      'User-Agent': 'Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/87.0.4280.88 Safari/537.36'
    }

    response = requests.get(url, headers=headers)
    html = response.text
    # print(response.text)

    dir_name = re.findall('<h1 class="post-title h1">(.*?)</h1>',html)[-1]
    if not os.path.exists(dir_name):
      os.mkdir(dir_name)

    urls = re.findall('<a href="(.*?)" alt=".*?" title=".*?">', html)
    for url_data in urls:
      # time.sleep(1)
      urls_data = "https:" + url_data
      print(urls_data)
      # 图片的名称
      file_name = urls_data.split('/')[-1]
      # print(file_name)
      response_data = requests.get(urls_data, headers = headers)
      # print(response_data.content)
      with open(dir_name + '/' + file_name, 'wb') as f:
            f.write(response_data.content)

url_list =[
    'https://www.vmgirls.com/13344.html',
    'https://www.vmgirls.com/15881.html',
    'https://www.vmgirls.com/15400.html',
    'https://www.vmgirls.com/15323.html',
    'https://www.vmgirls.com/15370.html'

]

for url1 in url_list:
    get_pic(url1)

明伟 发表于 2021-3-17 08:23

谢谢分享！

Predo 发表于 2021-3-17 08:30

多谢分享多谢分享

今心 发表于 2021-3-17 08:32

一定支持，谢谢大佬的分享

lx2323236 发表于 2021-3-17 08:32

谢谢大牛

马了顶大 发表于 2021-3-17 09:14

谢谢分享

白日梦想家 发表于 2021-3-17 09:39

6666

a2465546510 发表于 2021-3-17 09:59


支持楼主，谢谢分享。

吾问无为谓 发表于 2021-3-17 10:34


感谢楼主的分享

110905 发表于 2021-3-17 10:58

感谢楼主分享
页: [1] 2
查看完整版本: 爬取美女图片