Amazon Category Scraper、Amazon 类目抓取、Amazon Category 数据 面向 类目运营、选品与商品数据治理团队。本仓库提供可运行的 Python 示例,用于把已合法获得的公开电商记录规范化为结构化 JSON;它不包含目标平台抓取器、Cookie、登录流程、订单或客户数据处理,也不包含访问限制规避逻辑。
合规边界:仅处理具有明确、合法公开来源的商品、类目、搜索结果、公开评价和公开聚合指标。请优先使用官方 API 或取得相应授权;不得处理买家资料、订单、收货信息、私密店铺后台、凭据、Cookie 或登录后专属内容。
将公开类目层级规范化,用于目录映射、市场分层和商品研究。
- 主关键词:Amazon Category Scraper、Amazon 类目抓取、Amazon Category 数据
- 处理对象:公开 Amazon 类目与节点记录
- 核心字段:
category_name,category_url,parent_category,breadcrumb,public_product_count,observed_at,source_url,collected_at - 输出:包含来源、处理时间和结构化字段的 JSON
只使用 Python 标准库:
python src/main.py --input examples/input.json输出会保存到 output/result.json。
[
{
"category_name": "Home & Kitchen",
"category_url": "https://www.example.com/category/home",
"parent_category": "Home",
"breadcrumb": [
"Home",
"Kitchen"
],
"public_product_count": 1200,
"observed_at": "2026-08-11T00:00:00Z",
"source_url": "https://www.example.com/public-product",
"collected_at": "2026-08-11T00:00:00Z"
}
]该示例负责字段校验、数据契约和结构化输出。生产环境还需要合规的数据来源、必要的官方权限、鉴权、速率策略、可观测性与数据治理。
使用 CoreClaw 生产级 Web Data API 获取公开网页数据
CoreClaw 是面向 AI Agent 和自动化工作流的 Web Data Infrastructure,可将公开网页数据转化为结构化结果,用于商品研究、价格监测、市场情报与 Agent 工作流。
- 仅输入具有明确、合法公开来源的记录;优先选择官方 API 或已获授权的数据服务。
- 不处理买家资料、订单、收货信息、私有后台、账号凭据、Cookie 或登录后专属数据。
- 不包含绕过验证、访问限制或反自动化机制的实现。
- 在数据仓库、BI 或 AI Agent 中保留来源和处理时间,以支持审计、删除与更新流程。
Amazon Scraper API | Amazon Product Scraper | Amazon Price Scraper | eBay Scraper | AliExpress Scraper
MIT