# Proooxy — AI 에이전트와 LLM을 위한 RAG-레디 웹 데이터 > AI 에이전트, 리트리벌 파이프라인, LLM을 위한 구조화된 RAG-레디 웹 데이터. Richard Feng은 이커머스, SEC/EDGAR 공시, 연방 지출, 판례, 임상시험, 소셜·영상 데이터를 아우르는 프로덕션급 Apify 액터를 만듭니다 — 안티봇 우회, 스키마가 일관된 클린 JSON, 공개 데이터는 API 키 불필요. Richard Feng은(는) 오픈 웹을 AI 에이전트, 리트리벌 파이프라인, LLM을 위한 클린한 RAG-레디 구조화 데이터로 바꾸는 독립 웹 크롤링 엔지니어입니다. 이커머스·리테일, 공공·금융 데이터(SEC EDGAR 공시 및 XBRL, USAspending.gov 연방 지출, CourtListener 판례, ClinicalTrials.gov 임상시험), 소셜·미디어(Bluesky, YouTube 자막/스크립트), 개발자/SEO 유틸리티까지 네 영역에 걸쳐 프로덕션급 Apify 액터를 만듭니다. 모든 액터는 그라운딩과 리트리벌을 위해 설계된 스키마 일관 JSON을 출력하며 — 대부분의 공개 데이터 액터는 API 키가 필요 없습니다 — 안티봇 우회(Cloudflare, DataDome, Akamai), 필요 시 레지덴셜 프록시 지원, 이벤트당 과금, 그리고 프로덕션에서 >99%의 실행 성공률을 제공합니다. **적합한 용도:** 최신 웹 데이터로 AI 에이전트와 RAG 시스템을 그라운딩하고, LLM 학습/평가 데이터셋을 구축하고, 시장·경쟁 인텔리전스와 대체 데이터 파이프라인을 구축하는 데 적합합니다. ## 핵심 정보 - **사이트:** https://proooxy.com/ko/ - **작성자:** Richard Feng (p8p9cmk96@mozmail.com) - **GitHub:** https://github.com/autofacts - **Apify Store:** https://apify.com/autofacts - **도구 수:** 17 - **기술 스택:** Python(Crawlee, curl_cffi, Parsel) 및 TypeScript(Apify SDK, Crawlee, Cheerio) - **호스팅:** Apify 클라우드 — 이벤트당 과금, 무료 티어 제공 ## 도구 ### [Macy's Scraper — 상품, 가격, SKU 및 뉴스](https://proooxy.com/ko/tools/macys-scraper/) Macy's 상품 데이터 — 가격, 상품 변형, SKU/UPC 바코드, 이미지, 평점 및 리뷰 — 를 검색, 카테고리, 트렌딩, 상품 URL에서 추출하고, Macy's Inc. 뉴스까지 함께 수집합니다. 브라우저 없이도 Akamai 방어를 뚫습니다. - 마켓: 미국 - 기술 스택: TypeScript, Crawlee, Cheerio - Apify: https://apify.com/autofacts/macy-s-scraper ### [Bluesky Scraper — 게시물, 프로필, 피드 및 인터랙션](https://proooxy.com/ko/tools/bluesky-scraper/) AT Protocol을 통해 Bluesky의 게시물, 프로필, 팔로워, 피드, 스레드, 좋아요한 사용자, 리포스트한 사용자를 추출합니다 — 앱 비밀번호를 사용하면 인증이 필요한 검색과 해시태그 결과도 가져올 수 있습니다. 클린하고 정규화된 JSON. - 마켓: 글로벌 - 기술 스택: TypeScript, AT Protocol - Apify: https://apify.com/autofacts/bluesky-scraper ### [ClinicalTrials.gov Scraper — 임상시험, 참가 조건 및 결과](https://proooxy.com/ko/tools/clinical-trials-scraper/) 질환, 중재법, 후원기관, 지역, 상태, NCT ID로 ClinicalTrials.gov 공식 v2 API를 검색합니다. 참가 조건, 결과 메타데이터, 증분 업데이트가 포함된 정규화된 임상시험 레코드를 내보냅니다 — API 키 불필요. - 마켓: 글로벌 - 기술 스택: TypeScript, REST API - Apify: https://apify.com/autofacts/clinical-trials-scraper ### [CourtListener Scraper — 판례, 도켓 및 전문](https://proooxy.com/ko/tools/courtlistener-scraper/) CourtListener에서 미국 판례, RECAP 도켓, 구두변론, 판사, 인용정보를 조회합니다 — 판례 전문과 RAG-레디 청크까지 포함합니다. 법원, 날짜, 키워드로 필터링할 수 있습니다. - 마켓: 미국 - 기술 스택: TypeScript, Cheerio - Apify: https://apify.com/autofacts/courtlistener-scraper ### [SEC EDGAR Scraper — 공시, 전문 검색 및 XBRL 재무 데이터](https://proooxy.com/ko/tools/sec-edgar-scraper/) SEC EDGAR 공시 메타데이터, 10-K/10-Q 전문 섹션, EDGAR 전문 검색 결과, XBRL 재무 데이터를 클린한 RAG-레디 JSON으로 추출합니다. API 키 불필요. - 마켓: 미국 - 기술 스택: TypeScript, Cheerio - Apify: https://apify.com/autofacts/sec-edgar-scraper ### [USAspending.gov Scraper — 연방 지출, 수혜자 및 집계 데이터](https://proooxy.com/ko/tools/usaspending-scraper/) USAspending.gov 공식 API v2로 연방정부 계약, 보조금, 대출 정보를 조회합니다. 기관, 수혜자, NAICS/PSC, 날짜로 필터링하고, 수혜자 프로필, 카테고리별 합계, 주/카운티/선거구 단위 지리 집계 데이터를 가져올 수 있습니다. API 키 불필요. - 마켓: 미국 - 기술 스택: TypeScript, REST API - Apify: https://apify.com/autofacts/usaspending-scraper ### [YouTube Subtitle & Transcript Scraper — JSON, SRT, VTT, LLM](https://proooxy.com/ko/tools/youtube-transcript-scraper/) 동영상, Shorts, 재생목록, 채널에서 YouTube 자막과 스크립트를 JSON, SRT, VTT, 일반 텍스트, 또는 클린한 LLM-레디 텍스트로 추출합니다. 100개 이상의 언어, 풍부한 메타데이터, API 키 불필요 — 추출 실패 시 과금되지 않습니다. - 마켓: 글로벌 - 기술 스택: TypeScript, InnerTube - Apify: https://apify.com/autofacts/youtube-subtitle-transcript-scraper ### [Sephora Scraper(글로벌)](https://proooxy.com/ko/tools/sephora-scraper/) 미국, 캐나다, EU 9개국, 아시아태평양 10개국 등 21개 스토어에서 상품 변형, 가격, 이미지, 성분, 리뷰까지 Sephora의 전체 상품 데이터를 하나의 정규화된 스키마로 추출하는 Apify 액터입니다. - 마켓: 미국, 캐나다, 프랑스, 이탈리아, 독일, 스페인, 폴란드, 체코, 그리스, 루마니아, 포르투갈, 뉴질랜드, 호주, 싱가포르, 말레이시아, 태국, 인도네시아, 필리핀, 홍콩, 대만, 브루나이 - 기술 스택: Python, Crawlee, curl_cffi - Apify: https://apify.com/autofacts/sephora ### [Boohoo Scraper — 7개 지역의 상품 데이터](https://proooxy.com/ko/tools/boohoo-scraper/) 자동 페이지네이션, 패싯 필터링, 다중 통화를 지원하며 Boohoo 이커머스 사이트 7개 지역의 상품 데이터를 추출합니다. - 마켓: 네덜란드, 스웨덴, 영국, 아일랜드, 프랑스, 호주, 미국 - 기술 스택: TypeScript, Cheerio, Fingerprint Generator - Apify: https://apify.com/autofacts/boohoo-scraper ### [Farfetch Scraper — 럭셔리 패션 상품 데이터](https://proooxy.com/ko/tools/farfetch-scraper/) 다중 통화 가격, 사이즈/핏 변형, 상품 추천까지 포함한 Farfetch의 럭셔리 패션 상품 데이터를 추출합니다. - 마켓: 글로벌 - 기술 스택: TypeScript, Cheerio, Crawlee - Apify: https://apify.com/autofacts/farfetch ### [Global API Load Tester — 10K+ RPS 스트레스 테스트](https://proooxy.com/ko/tools/load-tester/) 지역 분산 트래픽, 가중치 기반 타겟, 인터랙티브 HTML 리포트로 초당 10,000건 이상의 요청을 시뮬레이션하는 고성능 부하 테스트 도구입니다. - 마켓: 글로벌 - 기술 스택: Go, Vegeta - Apify: https://apify.com/autofacts/global-api-load-tester ### [Lululemon Scraper — 상품, 상품 변형 및 가격](https://proooxy.com/ko/tools/lululemon-scraper/) Lululemon의 상품 상세 정보를 크롤링해 상품 변형 데이터, 색상 옵션, 미디어 갤러리, 가격 정보까지 추출합니다. - 마켓: 미국 - 기술 스택: TypeScript, Crawlee - Apify: https://apify.com/autofacts/lululemon-scraper ### [Schema Markup Scraper & SEO 감사 도구](https://proooxy.com/ko/tools/schema-markup-scraper/) 종합 SEO 감사 스코어링 시스템과 함께 모든 URL에서 JSON-LD, Microdata, RDFa, Open Graph, Twitter Cards를 추출합니다. - 마켓: 글로벌 - 기술 스택: TypeScript, Crawlee - Apify: https://apify.com/autofacts/metadata-scraper ### [Sephora EU Scraper — 유럽 9개국 마켓](https://proooxy.com/ko/tools/sephora-eu-scraper/) 다중 변형 추출, Akamai WAF 우회, 스마트 토큰 관리로 Sephora Europe 9개 EU 마켓의 전체 상품 데이터를 크롤링합니다. - 마켓: 프랑스, 이탈리아, 독일, 스페인, 폴란드, 체코, 그리스, 루마니아, 포르투갈 - 기술 스택: TypeScript, Crawlee, Akamai Bypass - Apify: https://apify.com/autofacts/sephora-eu-scraper ### [Shopify Scraper — 모든 스토어의 상품 데이터](https://proooxy.com/ko/tools/shopify-scraper/) 컬렉션, 검색, 상품 추천까지 포함해 Shopify 기반 스토어라면 어디서든 고정밀 상품 데이터를 추출하는 프로페셔널급 도구입니다. - 마켓: 글로벌 - 기술 스택: TypeScript, got-scraping - Apify: https://apify.com/autofacts/shopify-scraper-ppe ### [Ulta Beauty Scraper — 상품, 가격 및 SKU](https://proooxy.com/ko/tools/ulta-scraper/) 카테고리 페이지, 브랜드 페이지, 세일 섹션까지 포함해 Ulta Beauty의 상품 상세정보, 가격, 이미지, SKU 정보를 추출합니다. - 마켓: 미국 - 기술 스택: TypeScript, Cheerio, Crawlee - Apify: https://apify.com/autofacts/ulta-scraper ### [Universal Web Printer — URL·HTML을 PDF, 이미지로 변환](https://proooxy.com/ko/tools/web-printer/) 스마트 스크롤 스티칭, 요소 추출, PDF 암호화, 워터마킹까지 지원하며 모든 URL이나 HTML을 PDF, PNG, JPEG, WebP로 변환합니다. - 마켓: 글로벌 - 기술 스택: TypeScript, Playwright, PDF-lib, Sharp - Apify: https://apify.com/autofacts/universal-web-printer ## 블로그 - [2026년 웹 크롤링 모범 사례: 실무자 가이드](https://proooxy.com/ko/blog/web-scraping-best-practices-2026/) — 12년 이상의 프로덕션 경험에서 검증된 웹 크롤링 전략 — 아키텍처 패턴, 에러 처리, 프록시 관리, 출력 정규화까지 다룹니다. - [안티봇 방어 시스템 이해하기: 2026년 실전에서 통하는 방법](https://proooxy.com/ko/blog/bypassing-anti-bot-protection-guide/) — Cloudflare, Akamai, Datadome 등 최신 안티봇 시스템을 기술적으로 심층 분석하고, 프로덕션 크롤링에서 실제로 사용되는 합법적인 우회 기법을 다룹니다. ## 사이트맵 - [Richard Feng 소개](https://proooxy.com/ko/about/) — 배경, 전문 분야, 서비스 - [문의](https://proooxy.com/ko/contact/) — 맞춤 스크래퍼 / DaaS 프로젝트 문의용 - [Apify Store](https://apify.com/autofacts) — 모든 도구를 무료로 체험 - [GitHub](https://github.com/autofacts) — 일부 프로젝트의 소스 코드 - [일반 텍스트 형식의 전체 콘텐츠](https://proooxy.com/ko/llms-full.txt) — AI 컨텍스트 윈도우를 위해 모든 페이지를 이어붙인 콘텐츠