先说清楚:这不是我写的东西。它是 GitHub 上的开源项目(lagenar/shopify-scraper,Apache-2.0)。收录到这里的判断依据是 star 数、维护活跃度,以及对独立站运营是否真的用得上。
它能帮你做什么
- 扒全站商品 —— 标题、价格、变体、图片、描述、SKU 一次拿全,直接落成 CSV,Excel 里就能开始分析。
- 按 collection 精准取 —— 先列出店铺所有 collection,再挑其中几个抓,不用整站全拉。
- 不需要 API key —— 读的是 Shopify 自己对外开放的
/products.json,任何 Shopify 店铺默认都有。 - 极轻 —— 单文件 Python 脚本,只依赖标准库和 requests,看得懂也改得动。
怎么用
需要 Python 3。克隆下来直接跑,参数就是竞品店铺的域名:
git clone https://github.com/lagenar/shopify-scraper.git
cd shopify-scraper
# 抓全站商品
python3 shopify.py https://competitor-store.com
# 先看有哪些 collection
python3 shopify.py --list-collections https://competitor-store.com
# 只抓指定 collection
python3 shopify.py -c col1,col2 https://competitor-store.com
输出为 CSV。这个仓库 2023 年后没再更新,但因为依赖的是 Shopify 的公开接口而非页面结构,目前依然可用。
什么时候用它,什么时候用别的
做一次性的竞品品类盘点、价格带分析、上新节奏统计最快。需要持续监控变化用 changedetection.io。 另外要知道:这个仓库 2023 年 9 月以后就没再更新过。它依赖的 products.json 是 Shopify 的公开接口,目前仍然可用,脚本也短,出问题自己改几行就行。


