xianyu_spider - 闲鱼商品搜索 API
https://github.com/superboyyy/xianyu_spider
基于 FastAPI 构建的闲鱼商品搜索接口,支持异步并发请求和自动化数据去重存储。
● 关键词商品搜索(支持分页)
● 异步高性能爬取(Playwright 无头浏览器)
● 智能数据去重(基于链接特征哈希值)
● 数据持久化存储(关系数据库)
● 返回新增记录统计信息
#GitHub #Tool
https://github.com/superboyyy/xianyu_spider
基于 FastAPI 构建的闲鱼商品搜索接口,支持异步并发请求和自动化数据去重存储。
● 关键词商品搜索(支持分页)
● 异步高性能爬取(Playwright 无头浏览器)
● 智能数据去重(基于链接特征哈希值)
● 数据持久化存储(关系数据库)
● 返回新增记录统计信息
#GitHub #Tool