当前位置: 首页 > news >正文

【Python网络爬虫笔记】5-(Request 带参数的get请求) 爬取豆瓣电影排行信息

目录

  • 1.抓包工具查看网站信息
  • 2.代码实现
  • 3.运行结果

1.抓包工具查看网站信息

请求路径

url:https://movie.douban.com/typerank

在这里插入图片描述
请求参数
在这里插入图片描述
页面往下拉,出现新的请求结果,参数start更新,每次刷新出20条新的电影数据
在这里插入图片描述

2.代码实现

# 使用网络爬虫,爬取https://movie.douban.com/typerank 的电影数据# 导入requests包
import requests#请求路径
url = "https://movie.douban.com/j/chart/top_list"# 请求头
headers = {"User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/131.0.0.0 Safari/537.36 Edg/131.0.0.0"
}# 参数
params = {"type": "11","interval_id": "100:90","action": "","start": 60,"limit": 20
}# 发送请求,获取响应
response = requests.get(url, params=params,headers=headers)# 输出
print(response.json())# 关闭响应
response.close()

3.运行结果

start为60 的运行结果
在这里插入图片描述
在这里插入图片描述
start为0 的运行结果
在这里插入图片描述
在这里插入图片描述

http://www.lryc.cn/news/495415.html

相关文章:

  • 递归算法讲解(c基础)
  • AJAX一、axios使用,url组成(协议,域名,资源路径)查询参数和化简,错误处理,请求/响应报文,状态码,接口文档,
  • QT6学习第六天 初识QML
  • 映射vim键位,基本功能键位表(未更完)
  • Python学习笔记(5)Python的创建型设计模式
  • qt QAnimationDriver详解
  • 零拷贝相关知识点(一)
  • STM32的CAN波特率计算
  • 简单好用的折线图绘制!
  • Hadoop批量计算实验
  • 基于rpcapd与wireshark的远程实时抓包的方法
  • ubuntu多版本安装gcc
  • 算法刷题Day1
  • 泛化调用 :在没有接口的情况下进行RPC调用
  • Java 泛型详细解析
  • 题解:CF332B Maximum Absurdity
  • Vue 集成和使用 SQLite 的完整指东
  • 【JVM什么时候触发YoungGC和FullGC】
  • ubuntu配置网络
  • 第十一课 Unity编辑器创建的资源优化_预制体和材质篇(Prefabs和Materials)详解
  • 2024.11.29(单链表)
  • 基于深度学习和卷积神经网络的乳腺癌影像自动化诊断系统(PyQt5界面+数据集+训练代码)
  • opengl 三角形
  • 23种设计模式-抽象工厂(Abstract Factory)设计模式
  • 手机上怎么拍证件照,操作简单且尺寸颜色标准的方法
  • IDEA报错: java: JPS incremental annotation processing is disabled 解决
  • OCR实现微信截图改名
  • 第一届“吾杯”网络安全技能大赛 Writeup
  • 再谈Java中的String类型是否相同的判断方法
  • <一>51单片机环境