xianyu_spider - 闲鱼商品搜索 API

https://github.com/superboyyy/xianyu_spider

基于 FastAPI 构建的闲鱼商品搜索接口,支持异步并发请求和自动化数据去重存储。

关键词商品搜索(支持分页)
异步高性能爬取(Playwright 无头浏览器)
智能数据去重(基于链接特征哈希值)
数据持久化存储(关系数据库)
返回新增记录统计信息

#GitHub #Tool GitHub - superboyyy/xianyu_spider: 闲鱼爬虫,基于闲鱼网页端开发,使用 FastAPI 构建的闲鱼商品搜索接口,支持异步并发请求和自动化数据去重存储。
 
 
Back to Top
OKHK