【爬虫专区】批量下载PDF （无反爬）

天命：只要没反爬，一切都简单

这次爬取的是绿盟的威胁情报的PDF

先看一下结构，很明显就是一个for循环渲染

burp抓包会发现第二次接口请求

接口请求一次就能获取到了所有的数据

然后一个循环批量下载数据即可，其实没啥难度的

import requests,os

res = requests.get("https://nti.nsfocus.com/api/v2/report/notie/?page=1&size=200&order=reported")
data_dict = res.json() # 提取json格式
当前相对路径 = os.getcwd()  # 获取绝对路径，每个人电脑不一样，所以预算是相对路径
os.mkdir("PDF") # 在当前文件夹下，创建一个PDF文件夹

# 提取data字段
data = data_dict['data']
for 数据 in data:
    日期 = 数据['created']
    日期 = 日期.split("T")[0]
    标题 = 数据['title']
    文件名 =