当前位置：首页 > news >正文

影刀RPA_Temu关键词取数_源码解读

news 2025/7/27 5:18:50

一、项目简介

本项目是一个影刀RPA开发的Temu关键词取数采集工具，主要功能是通过关键词搜索或自定义链接两种模式，自动化抓取Temu平台上的商品数据，并导出为Excel表格。该工具与Temu选品助手联动，能够获取包括商品基本信息、销量数据、价格信息、店铺信息等多维度数据，帮助电商运营人员进行市场分析和竞品调研。

二、项目结构

xbot_robot/
├── .dev/                 # 影刀可视化流程配置文件
│   ├── main.flow.json    # 主流程配置
│   ├── process1.flow.json # 流程1配置
│   ├── process2.flow.json # 流程2配置
│   ├── process3.flow.json # 流程3配置
│   ├── process4.flow.json # 流程4配置
│   ├── process5.flow.json # 流程5配置
│   ├── process6.flow.json # 流程6配置
│   ├── utils.flow.json   # 工具函数流程配置
│   ├── screenshot/       # 截图存储目录
│   └── ...
├── main.py               # 程序入口
├── process1.py           # 搜索内容抓取流程
├── process2.py           # 商品详情抓取流程
├── process3.py           # 数据表格初始化
├── process4.py           # 用户输入配置
├── process5.py           # 文件路径配置
├── process6.py           # 数据导出到Excel
├── utils.py              # 数据处理工具函数
├── package.json          # 项目依赖配置
├── settings.json         # 项目设置
└── ...

三、项目特点和核心代码

主要特点

双模式数据采集：支持通过关键词搜索和自定义链接两种方式获取数据
断点续跑功能：支持从上次中断处继续数据采集，提高工作效率
完整的数据维度：采集商品基本信息、销量数据、店铺信息等多维度数据
自动化导出：自动将采集数据导出为Excel文件
异常处理机制：包含完善的错误处理和提示功能

核心代码示例

1. 流程选择（main.py）

# 根据用户选择执行不同流程
if dialog_result.process_selection == "搜索内容抓取":xbot_visual.log("当前应用的模式为通过搜索内容获取")xbot_visual.process.run(process="process4")  # 搜索配置xbot_visual.process.run(process="process1")  # 获取列表页数据xbot_visual.process.run(process="process2")  # 获取详情页数据xbot_visual.process.run(process="process6")  # 导出数据
elif dialog_result.process_selection == "自定义链接抓取":xbot_visual.log("当前应用的模式为通过链接获取")xbot_visual.process.run(process="process5")  # 自定义链接配置xbot_visual.process.run(process="process2")  # 获取详情页数据xbot_visual.process.run(process="process6")  # 导出数据

2. 数据处理函数（utils.py）

# 处理并拼接商品链接
def deal_data(response_body_list):note_id_list=[]for response in response_body_list:r = json.loads(response['body'])adinfos = r.get('result', {}).get('data').get('goods_list',[])for info in adinfos:url = 'https://www.temu.com'+info.get('seo_link_url')note_id_list.append(url)return note_id_list

3. 数据导出（process6.py）

# 导出数据表格到Excel
package.variables['file_path'] = xbot_visual.databook.export_data(folder_source="custom", custom_folder_path=glv['file_path'], file_name="影刀数据表格.xlsx", export_header=True
)
xbot_visual.dialog.show_message_box(title="提示", message=f"数据已抓取完毕，导出文件存放为{glv['file_path']}")