~/ecommerce/shopify-scraper
Shopify Scraper — Data Produk dari Toko Manapun
Tool kelas profesional untuk mengekstrak data produk dengan fidelitas tinggi dari toko Shopify mana pun, termasuk collection, search, dan rekomendasi produk.
umum
>99% keberhasilan
TypeScriptgot-scraping
Global
kategoriecommerce / umum
bahasaTypeScript
stackTypeScript, got-scraping
pasarGlobal
keberhasilan>99%
outputJSON bersih, siap-RAG
fitur utama
Universal — bekerja dengan toko Shopify mana pun
Dukungan ekstraksi katalog seluruh toko dan search
Rekomendasi produk (hingga 20 per produk)
Scraping collection dan produk individual
Ekstraksi tag dan kategori
Normalisasi mata uang (harga x100) untuk presisi
use case
- Riset pasar di toko-toko Shopify pada niche apa pun
- Analisis kompetitif untuk brand DTC
- Agregasi katalog produk untuk platform perbandingan
- Monitoring tren di toko-toko e-commerce independen
- Membangun dataset rekomendasi produk
- Monitoring harga untuk reseller
parameter input
| Parameter | Tipe | Wajib | Deskripsi |
|---|---|---|---|
startUrls | array | wajib | URL toko Shopify — produk, collection, atau home toko |
proxy | object | opsional | Residential proxy disarankan untuk hasil terbaik |
maxRequestsPerCrawl | number | opsional | Batas request (default: 100) |
maxRecommendationsPerProduct | number | opsional | Jumlah produk rekomendasi yang diambil (default: 0, max: 20) |
query | string | opsional | Search query untuk menemukan produk dalam sebuah toko |
Contoh Output
1{
2 "source": "https://store.example.com/products/...",
3 "brand": "Example Brand",
4 "title": "Premium Organic Cotton T-Shirt",
5 "description": "Made from 100% organic cotton...",
6 "categories": ["Tops", "T-Shirts"],
7 "tags": ["organic", "sustainable", "cotton"],
8 "options": [
9 { "name": "Size", "values": ["S", "M", "L", "XL"] },
10 { "name": "Color", "values": ["White", "Black", "Navy"] }
11 ],
12 "variants": [
13 {
14 "sku": "SHOP-OCT-WHT-M",
15 "name": "White / M",
16 "price": 4500,
17 "currency": "USD",
18 "inStock": true
19 }
20 ],
21 "medias": [
22 { "type": "image", "url": "https://..." }
23 ]
24}
faq
Apakah ini bekerja dengan toko Shopify mana pun?
Ya, scraper ini bekerja dengan toko mana pun yang memakai Shopify. Scraper ini memanfaatkan struktur data produk standar Shopify, yang konsisten di semua toko.
Bisakah saya mencari produk tertentu?
Bisa, gunakan parameter query untuk mencari di dalam toko tertentu. Berguna untuk menemukan jenis produk tertentu tanpa harus men-scrape seluruh katalog.
Bagaimana rekomendasi produk diekstrak?
Set maxRecommendationsPerProduct untuk mengambil produk terkait. Hingga 20 rekomendasi tersedia per produk, berguna untuk membangun product graph.
terkait di ~/ecommerce
department store
Macy's Scraper — Produk, Harga, SKU & Berita
Produk, harga, SKU/UPC & berita Macy's — tahan Akamai, tanpa browser.
buka