D4Vinci / Scrapling
🕷️ 단일 요청에서 대규모 크롤링까지 모든 것을 처리하는 적응형 웹 스크래핑 프레임워크!
이 프로젝트에 대해
D4Vinci 님의 Scrapling 프로젝트는 GitHub에서 59.9K개의 별을 받으며 많은 개발자들의 주목을 받고 있습니다. 특히 Python 환경에서 유용하게 활용될 수 있으며, 최근 오픈소스 커뮤니티에서 활발한 기여와 토론이 이루어지고 있는 트렌딩 레포지토리입니다.
Language Breakdown
🇰🇷 한국어 번역 README
캐시 히트현대 웹을 위한 손쉬운 웹 스크래핑
العربيه | Español | Português (Brasil) | Français | Deutsch | 简体中文 | 日本語 | Русский | 한국어
선택 방법 · 페처(Fetchers) · 스파이더(Spiders) · 프록시 회전 · CLI · MCP
Scrapling은 단일 요청에서 전체 크롤까지 모든 것을 처리하는 적응형 웹 스크래핑 프레임워크입니다.
그 파서는 웹사이트 변화를 학습하고 페이지가 업데이트될 때 자동으로 요소를 재배치합니다. 페처는 Cloudflare Turnstile과 같은 안티봇 시스템을 즉시 우회합니다. 그리고 스파이더 프레임워크를 사용하면 일시 중지/재개 및 자동 프록시 회전 기능을 갖춘 동시 다중 세션 크롤로 확장할 수 있습니다. 몇 줄의 Python 코드로 모든 것이 가능합니다. 하나의 라이브러리, 타협 없는 성능.
실시간 통계와 스트리밍을 통한 매우 빠른 크롤링. 웹 스크래퍼를 위해, 그리고 일반 사용자를 위해 제작되어 모두를 위한 기능이 있습니다.
또는 전체 크롤로 확장 가능
플래티넘 스폰서
Scrapling은 Cloudflare Turnstile을 처리합니다. 엔터프라이즈급 보호를 위해, Hyper Solutions는 Akamai, DataDome, Kasada 및 Incapsula용 유효한 안티봇 토큰을 생성하는 API 엔드포인트를 제공합니다. 간단한 API 호출만으로 브라우저 자동화가 필요하지 않습니다.
안녕하세요, 저희는 BirdProxie를 만들었습니다.
🌐 본 텍스트는 빠른 이해를 돕기 위한 요약 번역본입니다. 정확한 기술 정보 및 전체 코드는 GitHub 원문에서 확인하실 수 있습니다.
이 정보는 AI가 자동으로 분석한 결과입니다. 정확한 내용은 원문을 확인하세요.
D4Vinci/Scrapling GitHub 원문 바로가기 →