smart-crawler · API 对接文档

API Integration Guide

跨境电商竞品采集 SaaS · 59 站点 · MCP + REST 双协议 · 按 record 计费 · 自动反爬

1你的 API Key(请妥善保管)

下面这把 key 是给你/同事直接对接的,明文只在此处展示一次。

API KEY · External Integration · 2026-05-25
sck_ikuBVCAjAKygdAxu8_DNSDc9iOJkgXMY7jBf5ceMmlw 点击复制
Base URL:https://smartcrawler.io · 所有数据接口需带 X-API-KeyAuthorization: Bearer
⚠ 安全提示:这把 key 等同于 admin 权限子集,泄露会被滥用。建议:

23 个对接路径(按需求选)

3快速开始(curl 3 行试通)

3.1 列出全部站点(验证 key)

# 站点清单 · 验证 key 有效
curl -H "X-API-Key: sck_ikuBVCAjAKygdAxu8_DNSDc9iOJkgXMY7jBf5ceMmlw" \
     "https://smartcrawler.io/api/v1/sites"

3.2 查询某站商品(最常用)

# 查 vidaxl_de 在售商品 top 100
curl -H "X-API-Key: sck_iku..." \
     "https://smartcrawler.io/api/v1/products?site=vidaxl_de&page_size=100"

# 含字段:sku/spu/title/sale_price/original_price/currency/rating/
#         review_count/30day_sales/category_path/image_urls/url

3.3 商品详情 + 价格历史

# 单个 SKU 详情 + 30 天价格曲线
curl -H "X-API-Key: sck_iku..." \
     "https://smartcrawler.io/api/v1/products/songmics_us/SOL-3782"

3.4 评论(VOC)

# Trustpilot 某商家全部负面评论
curl -H "X-API-Key: sck_iku..." \
     "https://smartcrawler.io/api/v1/reviews?platform=trustpilot&max_rating=2&page_size=50"

4常用端点(最新 30+ 个)

站点 / 商品

方法路径用途
GET/api/v1/sites全 59 站点元数据
GET/api/v1/products查询商品(site/brand/category/价格区间/分页)
GET/api/v1/products/{site}/{sku}单 SKU 详情 + 价格曲线
GET/api/v1/site/{site}单站快照(含 metrics + 关联接口)
GET/api/v1/promotions促销活动列表
GET/api/v1/trendsSKU 趋势(日序列)

评论(VOC)

GET/api/v1/reviewsTrustpilot/Reviews.io/Google Maps 评论

Google Shopping

GET/api/v1/shopping/keywords关键词清单
GET/api/v1/shopping/resultsSERP 结果
GET/api/v1/shopping/competitor-share商家份额

数据导出

GET/api/export/products?format=csvCSV/XLSX/JSON/ZIP 导出(4 toggle 可选)
GET/api/export/preview导出前预览(行数/大小估算)
GET/api/coverage59 站覆盖率仪表
GET/api/daily-delta/latest当日新增/价格变化/新促销

采集触发

POST/api/jobs/trigger?site=xxx手动触发某站抓取
GET/api/jobs?limit=N查 worker 任务状态

用量 / 计费

GET/api/billing/usage?days=3030 天 API key 用量明细
GET/api/proxy/status10 代理池状态

5响应格式

v1 endpoints 统一信封

{
  "object": "list",
  "count": 100,
  "total": 10452,
  "has_more": true,
  "data": [
    {
      "sku": "SOL-3782",
      "spu": "H-1234",
      "site": "songmics_us",
      "brand": "SONGMICS",
      "title": "电动升降桌 48英寸",
      "category": "Office Furniture/Desks",
      "price": {
        "sale": 189.99,
        "original": 209.99,
        "currency": "USD",
        "on_promotion": true
      },
      "rating": { "score": 4.6, "review_count": 412 },
      "estimate": { "30day_sales": 137, "revenue": 26028.63 },
      "images": ["https://..."],
      "url": "https://songmics.com/products/sol-3782",
      "identifiers": { "mpn": "...", "gtin": "..." },
      "first_seen": "2026-04-15",
      "last_seen": "2026-05-24"
    }
  ]
}

错误响应

{
  "detail": "未授权"    # 401
}
{
  "detail": "站点不存在"  # 404
}

659 站覆盖(截止 2026-05-25)

类型站点SKU 状态
家居品牌自营SONGMICS × 6 国 / Costway × 9 / Homary × 5 / Aosom 等35 站 100% 覆盖
家居 MarketplaceWayfair / Overstock / Crate&Barrel / West Elm / Article / IKEA每站 1000+ 真品
欧洲电商Otto.de / Bol.com / CDiscount / Idealo / Vidaxl × 12Bol/CDiscount/IKEA 各 1000
评论平台Trustpilot × 9 / Google Maps × 7 / TrustedShops / Avis VérifiésVOC 评论 API 就绪
价格比较Google Shopping / Idealo关键词 + 商家份额

7MCP 服务器(推荐给 AI Agent 用)

如果你们对接方是 AI Agent(Claude / GPT),直接走 MCP 协议更稳。

# Claude Code / MCP-compatible client 配置
{
  "mcpServers": {
    "smart-crawler": {
      "url": "https://smartcrawler.io/mcp",
      "headers": {
        "Authorization": "Bearer sck_ikuBVCAjAKygdAxu8_DNSDc9iOJkgXMY7jBf5ceMmlw"
      }
    }
  }
}

暴露 12 个工具:list_data_sources / search_competitor_products / get_product_detail / list_promotions / get_voc_reviews / voc_summary / competitor_landscape / amazon_voc_report / fetch_amazon_reviews / reddit_top_contributors / reddit_user_activity / reddit_subreddit_playbook

8计费

当前 demo 阶段:用量不收费,先跑通对接。正式上线前会另发邮件告知开始计费时间。

9支持