python获取豆瓣评分9分以上的电影

我想生成的文件用excel保存,所以得安装一下这个

pip install pandas openpyxl

代码

import requests
import pandas as pd

# 模拟浏览器请求头
headers = {
    'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/91.0.4472.124 Safari/537.36'
}

# 豆瓣电影搜索评分9分以上的URL模板
base_url = 'https://movie.douban.com/j/new_search_subjects?sort=U&range=9,10&tags=&start='

# 存储电影信息的列表
movies_info = []

# 爬取前10页的数据(每页20部电影)
for start in range(0, 200, 20):
    url = base_url + str(start)
    
    # 发送请求
    response = requests.get(url, headers=headers)
    response.raise_for_status()
    
    # 解析JSON响应
    data = response.json()
    
    # 查找电影条目
    for item in data['data']:
        title = item['title']
        rating = item['rate']
        link = item['url']
        
        movies_info.append({
            'title': title,
            'rating': rating,
            'link': link
        })

# 将数据转换为DataFrame
df = pd.DataFrame(movies_info, columns=['title', 'rating', 'link'])

# 保存为Excel文件
excel_file = "douban.xlsx"
df.to_excel(excel_file, index=False)

print(f"数据已成功写入 {excel_file}")

共有200个电影9分以上

最近更新

  1. docker php8.1+nginx base 镜像 dockerfile 配置

    2024-07-15 04:08:03       66 阅读
  2. Could not load dynamic library ‘cudart64_100.dll‘

    2024-07-15 04:08:03       70 阅读
  3. 在Django里面运行非项目文件

    2024-07-15 04:08:03       57 阅读
  4. Python语言-面向对象

    2024-07-15 04:08:03       68 阅读

热门阅读

  1. std::async和std::future异步编程

    2024-07-15 04:08:03       23 阅读
  2. C++智能指针

    2024-07-15 04:08:03       19 阅读
  3. Python面试题:如何在 Python 中进行单元测试?

    2024-07-15 04:08:03       24 阅读
  4. git使用

    2024-07-15 04:08:03       21 阅读
  5. 哪个外汇平台可以交易美股?

    2024-07-15 04:08:03       20 阅读
  6. ubuntu disk

    2024-07-15 04:08:03       15 阅读
  7. 数据结构与算法基础篇--递归

    2024-07-15 04:08:03       20 阅读
  8. 来看一个14台480KW的充电站实际收入情况

    2024-07-15 04:08:03       20 阅读
  9. dify/api/models/workflow.py文件中的数据表

    2024-07-15 04:08:03       21 阅读
  10. Linux 命令集

    2024-07-15 04:08:03       23 阅读