逆向国内外社媒电商爬虫算法思路
本项目针对各种 app 数据采集接口进行逆向方案集成。
主要以#抖音 #小红书 #快手 #京东 #美团 #饿了么 #大众点评 #得物 #淘宝 #pdd # lazada为样本。
#小红书 app 小红书数据采集 用户采集 笔记信息
#抖音 商品搜索 商品详情
#快手 视频评论
抖音样例分析：
Name Description
goods_id *
string
(query)
商品idgoods_id
page
integer
(query)
页码Default value : 00
token *
string
(query)
token
Responses
Code Description Links
200
Successful ResponseMedia typeapplication/json
Controls Accept header.
Example Value
Schema
"string"
No links
422
Validation ErrorMedia typeapplication/json
Example Value
Schema
{"detail": [{"loc": ["string",0],"msg": "string","type": "string"}]
}
No links如有好的思路可以一起分享。