본문으로 건너뛰기
buildradar
토픽 · scraping

scraping

scraping 태그가 달린 추적 중인 오픈소스 리포지토리를 스타 수 순으로 보여줘요.

리포지토리
100
총 스타
698,341
평균 스타
6,983
비중
0.04%

같은 리포지토리에 scraping 태그와 자주 함께 쓰이는 토픽이에요.

최근 라이징

최근 90일 안에 만들어지고 scraping 태그가 달린 리포지토리예요.

  • trawl@germondai

    셀프 호스팅 스크래핑 엔진 — Cloudflare, Turnstile, reCAPTCHA, hCaptcha, GeeTest 등 모든 JS 챌린지 및 캡차 우회. FlareSolverr 및 Byparr의 대안이자 *arr 스택의 드롭인 대체품.

    742
  • browser-search@Johell1NS

    A skill for AI agents: search the web with SearXNG, browse with Camofox, bypass protections with CloakBrowser. Anti-hallucination by design. Self-hosted, free, unlimited.

    507
  • firecrawl@firecrawl

    대규모 웹 검색, 스크래핑, 상호작용을 위한 컨텍스트 API. 🔥

    174,034+3,406최근 7일 스타 변화
  • Scrapling@D4Vinci

    🕷️ 단일 요청부터 대규모 크롤링까지 모두 처리하는 적응형 웹 스크래핑 프레임워크!

    77,158+1,432최근 7일 스타 변화
  • scrapy@scrapy

    Python을 위한 빠르고 고수준의 웹 크롤링 및 스크래핑 framework Scrapy.

    64,098+106최근 7일 스타 변화
  • maigret@soxoj

    🕵️‍♂️ 3,000개 이상의 사이트에서 사용자 이름으로 인물 정보를 수집합니다.

    37,143+196최근 7일 스타 변화
  • Python으로 구현된 오픈소스 AI 구직 지원 봇: 브라우저 자동화와 웹 스크래핑으로 채용 공고를 읽고, 각 공고에 맞춤형 이력서와 자기소개서로 자동 지원합니다.

    30,278+58최근 7일 스타 변화
  • Scrapegraph-ai@ScrapeGraphAI

    AI 기반 Python 스크래퍼

    30,047+244최근 7일 스타 변화
  • crawlee@apify

    안정적인 크롤러를 구축하기 위한 Node.js용 웹 스크래핑 및 브라우저 자동화 라이브러리인 Crawlee. JavaScript 및 TypeScript 지원. AI, LLM, RAG 또는 GPT용 데이터를 추출합니다. 웹사이트에서 HTML, PDF, JPG, PNG 및 기타 파일을 다운로드하세요. Puppeteer, Playwright, Cheerio, JSDOM 및 원시 HTTP와 함께 작동합니다. 헤드풀 및 헤드리스 모드 모두 지원. 프록시 로테이션 기능 포함.

    25,556+98최근 7일 스타 변화
  • colly@gocolly

    Golang을 위한 우아한 스크래퍼 및 크롤러 프레임워크

    25,488+26최근 7일 스타 변화
  • 개발자를 위한 파이썬다운 HTML 파싱 라이브러리™

    13,814-4최근 7일 스타 변화
  • undetected-chromedriver@ultrafunkamsterdam

    커스텀 Selenium Chromedriver | 제로 설정 | 모든 봇 차단 시스템 우회 (Distil / Imperva / Datadome / CloudFlare IUAM 등)

    12,814+10최근 7일 스타 변화
  • webmagic@code4craft

    Java용 확장 가능한 웹 크롤러 프레임워크

    11,680+0최근 7일 스타 변화
  • camoufox@daijro

    🦊 안티디텍트 브라우저

    11,534+210최근 7일 스타 변화
  • crawlee-python@apify

    안정적인 크롤러를 구축하기 위한 Python용 웹 스크래핑 및 브라우저 자동화 라이브러리 Crawlee. AI, LLM, RAG 또는 GPT용 데이터를 추출하세요. 웹사이트에서 HTML, PDF, JPG, PNG 및 기타 파일을 다운로드하세요. Parsel, BeautifulSoup, Playwright 및 원시 HTTP와 호환됩니다. 헤드풀 및 헤드리스 모드를 모두 지원하며 프록시 로테이션 기능을 제공합니다.

    9,477+19최근 7일 스타 변화
  • camofox-browser@jo-inc

    AI 에이전트를 위한 스텔스 헤드리스 브라우저 — Cloudflare, 봇 탐지 및 안티 스크래핑 우회. Puppeteer/Playwright 드롭인 대체재.

    8,960+195최근 7일 스타 변화
  • awesome-web-scraping@lorien

    웹 스크래핑 및 데이터 처리를 위한 라이브러리, 도구, API 목록.

    8,138+10최근 7일 스타 변화
  • autoscraper@alirezamika

    Python을 위한 스마트하고 자동화된 빠르고 가벼운 웹 스크래퍼

    7,915+25최근 7일 스타 변화
  • tabula@tabulapdf

    Tabula는 PDF 파일 안에 갇힌 데이터 테이블을 추출하는 도구입니다

    7,476+5최근 7일 스타 변화
  • pydoll@autoscrape-labs

    Pydoll은 WebDriver 없이 Chromium 기반 브라우저를 자동화하고 현실적인 상호 작용을 제공하는 라이브러리입니다.

    7,053+16최근 7일 스타 변화
  • trafilatura@adbar

    웹의 텍스트 및 메타데이터 수집을 위한 Python 및 명령줄 도구: 크롤링, 스크래핑, 추출, CSV, JSON, HTML, MD, TXT, XML 출력 지원

    6,728+50최근 7일 스타 변화
  • 🚀 무료 HTTP, SOCKS4, SOCKS5 프록시 목록 (5분마다 업데이트) 및 로테이팅 프록시 API (100개 이상 국가)

    6,658+57최근 7일 스타 변화
  • pipet@bjesus

    해커들을 위해 온라인 자산에서 데이터를 스크래핑하고 추출하는 스위스 군대 칼 같은 도구입니다.

    4,771+1최근 7일 스타 변화
  • twikit@d60

    Twitter API 스크래퍼 | API 키 없음 | Twitter 내부 API | 무료 | Twitter 스크래퍼 | Twitter 봇

    4,638+11최근 7일 스타 변화
  • mechanize@sparklemotion

    자동화된 웹 상호작용을 쉽게 만들어주는 Ruby 라이브러리 Mechanize

    4,439+0최근 7일 스타 변화
  • snoop@snooppr

    Snoop — 공개 출처 정보(OSINT) 기반 정찰 도구

    4,011+1최근 7일 스타 변화
  • AnyCrawl@any4ai

    AnyCrawl 🚀: 웹사이트를 LLM 준비 데이터로 변환하고 Google/Bing/Baidu 등에서 구조화된 SERP 결과를 추출하는 Node.js/TypeScript 크롤러. 대량 처리를 위한 네이티브 멀티스레딩 지원.

    3,415+2최근 7일 스타 변화
  • 무료로 새로운 것을 배우고 싶으신가요? 웹 스크래핑과 자동화 기능을 통해 이 스크립트가 유용한 Udemy 쿠폰을 찾아 유료 Udemy 강좌를 완전 무료로 수강 신청해 줍니다!

    3,291+3최근 7일 스타 변화
  • facebook-scraper@kevinzg

    API 키 없이 페이스북 공개 페이지 스크래핑하기

    3,271+4최근 7일 스타 변화
  • panther@symfony

    PHP 및 Symfony용 브라우저 테스트 및 웹 크롤링 라이브러리

    3,067+2최근 7일 스타 변화
  • Ungoogled Chromium 기반의 오픈 소스 지문 브라우저, 프라이버시 브라우저

    3,003+28최근 7일 스타 변화
  • Python과 Oxylabs SERP API를 사용하여 Google Trends 데이터를 스크래핑하고 결과 비교를 수행하는 방법을 단계별로 학습합니다. 키워드, 인기 도, 지역별 분석, 관련 쿼리 등을 추출합니다.

    2,874+38최근 7일 스타 변화
← 토픽 목록으로