当前位置: 首页 > news >正文

【爬虫】携程旅游项目数据爬取

文章目录

  • 🍖 前言
  • 🎶一、抓取要求
  • ✨二、代码展示
  • 🏀三、运行结果
  • 🏆四、知识点提示


🍖 前言

【爬虫】携程旅游项目数据爬取


🎶一、抓取要求

描述:
输入城市名称,获取对应名称的旅游项目信息

✨二、代码展示

代码如下:

import json
import requests as rq
# 记得解码
url = "aHR0cHM6Ly9vbmxpbmUuY3RyaXAuY29tL3Jlc3RhcGkvc29hMi8yMDY4NC9wcm9kdWN0U2VhcmNo"
headers = {
    "user-agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/135.0.0.0 Safari/537.36"
}

params = {
    'systemcode': '09',
    'createtype': 3,
    'contentType': 'json'
}
res = rq.get("aHR0cHM6Ly9tLmN0cmlwLmNvbS9yZXN0YXBpL3NvYTIvMTAyOTAvY3JlYXRlY2xpZW50aWQ=", headers=headers, params=params,  verify=False)
clientID = res.json()['ClientID']
print(res.json()['ClientID'])

params = {
    "_fxpcqlniredt": clientID
}

for page in range(1, 10):
    data = {"info": "自己去找或者联系作者"}
    res = rq.post(url,headers=headers,data=json.dumps(data), params=params, verify=False)
    for row in res.json()['products']:
        print("基本信息:::", row['basicInfo']['extras']['NAME'])
        print("价格信息:::", row['priceInfo']['price'])
        print('--------------------------------------------------------------------\n\n')

🏀三、运行结果

控制台输出展示:
![在这里插入图片描述![在这里插入图片描述](https://i-blog.csdnimg.cn/direct/9d6ab8ae7817463c812d7547f5b9d776.png)

在这里插入图片描述

🏆四、知识点提示

知识点1:

关键词:动态获取请求参数
需要源码的留言,球球:二三六九四三三零八四
本文章中所有内容仅供学习交流使用,不用于其他任何目的,不提供完整代码,抓包内容、敏感网址、数据接口等均已做脱敏处理,严禁用于商业用途和非法用途,否则由此产生的一切后果均与作者无关!本文章未经许可禁止转载,禁止任何修改后二次传播,擅自使用本文讲解的技术而导致的任何意外,作者均不负责,若有侵权,请联系作者立即删除!!!

相关文章:

  • GPT-4o从语义分割到深度图生成,大模型狂潮下的计算机视觉:技术进步≠替代危机
  • C#UDP协议客户端工具类
  • C#实现存储数据到Redis
  • 运行小程序报错
  • Leetcode 3508. Implement Router
  • Java数据结构的基础用法
  • 嵌入式AI开源生态指南:从框架到应用的全面解析
  • JavaScript学习教程,从入门到精通,JavaScript 基础语法全面指南(5)
  • 2025.4.6总结
  • 低空经济基础设施建设方向与展望
  • 深入详解流形学习中的几何解释
  • 机器学习/深度学习
  • HTML语言的数据可视化
  • deepseek为采用JAVA重构模型运营平台vLLM和SGLang指定的计划
  • 【学习笔记】Ruckig: 高效实时运动规划库
  • 如何获取oracle cloud永久免费的vps(4C/24G)?
  • 机器学习的一百个概念(10)假阳性率
  • Spring 中的 bean 生命周期
  • 数据对象:DTO、DO、PO和 BO的区别和关系
  • 用 C++ 写汉诺塔程序
  • 西宁高端网站建设/爱站网长尾词挖掘
  • 做网站怎么添加背景图片/郑州网站运营
  • 400元做网站送网推/中国疾控卫生应急服装
  • 做暧日本视频观看网站/快速排名刷
  • 武汉需要线上推广公司/长春百度网站优化
  • 创建网站公司 徐州/海口网站关键词优化