Tópico · crawling

crawling

Repositórios de código aberto acompanhados marcados com crawling, ordenados por estrelas.

39 repositórios

#31
easy-scraping-tutorial ↗@MorvanZhouJupyter Notebook
Código de tutorial de web scraping em Python simples, porém útil.
★ 820+0Variação de estrelas nos últimos 7 dias
#32
seonaut ↗@StJudeWasHereGo
Ferramenta de auditoria de SEO de código aberto.
★ 779+7Variação de estrelas nos últimos 7 dias
#33
linkedin-profile-scraper-api ↗@josephlimtechTypeScript
Scraper de perfil do LinkedIn que retorna dados estruturados do perfil em JSON.
★ 776+0Variação de estrelas nos últimos 7 dias
#34
deepcrawl ↗@lumpinifTypeScript
Alternativa ao Firecrawl 100% gratuita e de código aberto para borda (edge), com melhor extração de links para agentes — que você pode implantar no Cloudflare ou Vercel por conta própria.
★ 668+6Variação de estrelas nos últimos 7 dias
#35
Craw4LLM ↗@cxcscmuPython
Repositório oficial para "Craw4LLM: Efficient Web Crawling for LLM Pretraining"
★ 664+1Variação de estrelas nos últimos 7 dias
#36
donsetch ↗@dondai44423Rust
Web fetch, search, and crawl for AI agents. Built from scratch in Rust. No keys, no accounts. AGPL v3.
★ 632—Variação de estrelas nos últimos 7 dias
#37
LinkedInDumper ↗@l4rm4ndPython
Script em Python 3 para extrair/coletar funcionários de empresas da API do LinkedIn
★ 611+2Variação de estrelas nos últimos 7 dias
#38
spidermon ↗@scrapinghubPython
Extensão do Scrapy para monitorar a execução de spiders.
★ 562+0Variação de estrelas nos últimos 7 dias
#39
webster ↗@zhuyingdaJavaScript
Um framework de alto nível confiável para web crawling e scraping para Node.js.
★ 560+1Variação de estrelas nos últimos 7 dias

← Voltar para os tópicos