परिचय
Richard Feng — वेब स्क्रैपिंग इंजीनियर, 12+ साल के अनुभव के साथ। मैं प्रोटेक्टेड वेबसाइटों को AI एजेंट, रिट्रीवल पाइपलाइन और LLM के लिए साफ, RAG-तैयार संरचित डेटा में बदलता हूं।
मैं कौन हूं
मैं Richard Feng हूं, एक फ्रीलांस वेब-ऑटोमेशन इंजीनियर, जिसे कोडिंग का 12+ साल का अनुभव है। मैं वेब स्क्रैपिंग, डेटा एक्सट्रैक्शन, और API रिवर्स इंजीनियरिंग में विशेषज्ञ हूं — जटिल, प्रोटेक्टेड वेबसाइटों को ऐसे साफ, संरचित डेटा में बदलता हूं जिसे AI सिस्टम असल में इस्तेमाल कर सकें।
मेरी टूलकिट Node.js (TypeScript), Python, Go, और Java तक फैली है, साथ ही Crawlee, Playwright, और Cheerio में गहरी विशेषज्ञता है। मैंने ऐसे प्रोडक्शन सिस्टम बनाए हैं जो लाखों रिक्वेस्ट >99% सफलता के साथ हैंडल करते हैं।
मैं क्या करता हूं
मैं 16 प्रोडक्शन-ग्रेड Apify एक्टर बनाता और मेंटेन करता हूं, जो 3,100+ यूज़र्स को लगातार >99% रन सफलता दर पर सर्व करते हैं। हर एक्टर साफ, RAG-तैयार JSON देता है — schema-सुसंगत, डीड्यूप्लिकेटेड, और वेक्टर स्टोर, रिट्रीवल पाइपलाइन, या ट्रेनिंग सेट में सीधे इस्तेमाल के लिए तैयार। ज़्यादातर सार्वजनिक-डेटा एक्टर के लिए किसी API key की ज़रूरत नहीं होती। मेरा काम चार क्षेत्रों में फैला है:
ई-कॉमर्स और रिटेल डेटा
प्रमुख ब्यूटी और फैशन प्लेटफ़ॉर्म के लिए स्क्रैपर, जिनमें शामिल हैं Sephora (21 ग्लोबल स्टोरफ्रंट), Ulta Beauty, Farfetch, Lululemon, Boohoo, Macy’s, और एक यूनिवर्सल Shopify scraper जो किसी भी Shopify-पावर्ड स्टोर के साथ काम करता है।
सार्वजनिक, वित्तीय और कानूनी डेटा
आधिकारिक U.S. डेटासेट साफ, RAG-तैयार JSON के रूप में — SEC EDGAR फाइलिंग व XBRL फाइनेंशियल्स, USAspending.gov के संघीय अवार्ड्स, CourtListener अदालती फैसले, और ClinicalTrials.gov स्टडीज़।
सोशल और मीडिया इंटेलिजेंस
AT Protocol के ज़रिए Bluesky पोस्ट, प्रोफ़ाइल, और इंटरैक्शन, साथ ही एक YouTube subtitle & transcript scraper जो 100+ भाषाओं में JSON, SRT, VTT, या LLM-तैयार टेक्स्ट देता है।
डेवलपर यूटिलिटीज़
स्क्रैपिंग से आगे के टूल्स — SEO व संरचित-डेटा ऑडिटिंग, web-to-PDF/image रेंडरिंग, और हाई-परफॉर्मेंस लोड टेस्टिंग।
विशेषज्ञताएं
- प्राइवेट API रिवर्स इंजीनियरिंग — अनडॉक्यूमेंटेड मोबाइल/वेब एंडपॉइंट्स को भरोसेमंद डेटा सोर्स में बदलना
- एंटी-बॉट बाईपास — Cloudflare, DataDome, Akamai WAF, और कस्टम प्रोटेक्शन
- RAG-तैयार आउटपुट — रिट्रीवल और ग्राउंडिंग के लिए बना normalized, schema-सुसंगत JSON
- मल्टी-रीजन स्क्रैपिंग — लोकेल, करेंसी, और कंप्लायंस का पूरा ध्यान
- हाई-रिलायबिलिटी सिस्टम — ऐसे एक्सट्रैक्टर जो स्केल पर >99% सफलता बनाए रखते हैं
टेक स्टैक
| कैटेगरी | टेक्नोलॉजीज़ |
|---|---|
| भाषाएं | TypeScript, Python, Go, Java |
| स्क्रैपिंग | Crawlee, Playwright, Cheerio, Parsel, got-scraping |
| एंटी-बॉट | Fingerprint generators, TLS fingerprinting, session rotation |
| इंफ्रास्ट्रक्चर | Apify Platform, Docker, GitHub Actions |
| टेस्टिंग | Vegeta, custom load-testing frameworks |
मेरे साथ काम करें
मैं कस्टम स्क्रैपिंग सॉल्यूशन, RAG डेटा-पाइपलाइन इंजीनियरिंग, और लगातार चलने वाली डेटा एक्सट्रैक्शन सर्विसेज़ ऑफ़र करता हूं। अगर आपके AI को असली वेब साफ डेटा के रूप में चाहिए — बात करते हैं।