爱咋咋地 发表于 2021-5-30 08:04

使用Python獲取豆瓣Top250電影排行榜數據

Java已經算是學入門了吧，試試Python，學習了一個下午，沒別的意思，拿豆瓣電影排行榜來練手
獲取的內容有：電影名字、上映時間、評分和評價人數
代碼很短，20余行

import re
import requests

p = 0
url = "https://movie.douban.com/top250?start=" + str(p) + "&filter="
while (p < 250):
    headers = {
      "User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64; rv:83.0) Gecko/20100101 Firefox/83.0"
    }
    resp = requests.get(url, headers=headers)
    page = resp.text
    obj = re.compile(r'<li>.*?<div class="item">.*?<span class="title">(?P<name>.*?)</span>.*?'
                     r'<p class="">.*?<br>(?P<year>.*?) .*?'
                     r'<span class="rating_num" property="v:average">(?P<score>.*?)</span>.*?'
                     r'<span>(?P<cnt>.*?)人评价</span>', re.S)
    res = obj.finditer(page)
    for it in res:
      print(it.group("name") + " : " + it.group("year").strip() + " : " + it.group("score") + " : " + it.group("cnt"))
      dic = it.groupdict()
      # 去除獲取到的空格
      dic['year'] = dic['year'].strip()
    # 達到翻頁的目的
    p += 25



在新标签打开所有链接复制所有链接URL复制所有链接URL（反向）复制所有链接标题 + URL复制所有链接标题 + URL (MD)复制所有链接标题 + URL (BBS)复制所有链接标题 + URL (筛选)复制所有链接标题 + URL (设置复制格式)在新标签页打开所有图片链接在一个标签页显示所有图片链接
复选框 - 选中
复选框 - 取消
复选框 - 反选
单选框 - 选中
单选框 - 取消
特殊单选框 - 选中


947769781 发表于 2021-5-30 08:20

谢谢@Thanks！

1234567890aaa 发表于 2021-5-30 08:20

6666

笑东风丶 发表于 2021-5-30 08:24

感谢大佬分享，大牛因有你而更精彩。

g012367 发表于 2021-5-30 08:26


感谢分享，谢谢提供分享

今心 发表于 2021-5-30 08:29

谢谢大佬的分享，必须支持

Beau 发表于 2021-5-30 09:32

感谢楼主分享！大牛有你更精彩！

Mickeyilmaz 发表于 2021-5-30 09:32

6666666666

2641933454 发表于 2021-5-30 09:46

谢谢分享！

jaxjoe 发表于 2021-5-30 11:14

感谢楼主分享
页: [1]
查看完整版本: 使用Python獲取豆瓣Top250電影排行榜數據