Lompat ke konten utama
buildradar
Sign in
Topik · web-scraping

web-scraping

Repositori open source terpantau bertanda web-scraping, diurutkan berdasarkan bintang.

119 repositori
  • finvizfinance@lit26

    Pustaka python analisis Finviz.

    1.624+0Perubahan bintang dalam 7 hari terakhir
  • DAT8@justmarkham

    Kursus Data Science General Assembly 2015 di Washington, DC

    1.620+0Perubahan bintang dalam 7 hari terakhir
  • Scweet@Altimis

    Scrape tweet, profil, follower, dan following dari Twitter/X, tanpa perlu kunci API. Pustaka Python dengan pengelompokan multi-akun cerdas, dukungan proxy, dan async.

    1.607+2Perubahan bintang dalam 7 hari terakhir
  • ai-map-py@oxylabs

    AI Map adalah alat pemetaan situs web bertenaga AI dari Oxylabs AI Studio yang menggunakan prompt bahasa alami untuk menemukan dan mengekstrak URL yang relevan dari situs web mana pun secara cerdas.

    1.598+41Perubahan bintang dalam 7 hari terakhir
  • single-file-cli@gildas-lormeau

    Alat CLI untuk menyimpan salinan otentik dari halaman web lengkap dalam satu file HTML (berbasis SingleFile)

    1.579+9Perubahan bintang dalam 7 hari terakhir
  • rvest@tidyverse

    Web scraping sederhana untuk R

    1.520+0Perubahan bintang dalam 7 hari terakhir
  • patchright-python@Kaliiiiiiiiii-Vinyzu

    Versi Python yang tidak terdeteksi dari pustaka pengujian dan otomatisasi Playwright.

    1.492+5Perubahan bintang dalam 7 hari terakhir
  • fredy@orangecoding

    ❤️ Fredy - [F]ind [R]eal [E]state [D]amn Eas[y] - Fredy terus mencari apartemen dan rumah baru di Eropa pada platform seperti ImmoScout24, Immowelt, eBay Kleinanzeigen dan langsung mengirimkan hasilnya kepada Anda melalui Slack, Telegram, Email, Discord, atau ntfy, sehingga Anda dapat fokus pada hal-hal yang lebih penting dalam hidup ;)

    1.462+11Perubahan bintang dalam 7 hari terakhir
  • core@roach-php

    Toolkit web scraping lengkap untuk PHP.

    1.455+0Perubahan bintang dalam 7 hari terakhir
  • agentql@tinyfish-io

    AgentQL adalah rangkaian alat untuk menghubungkan AI Anda ke web. Menampilkan bahasa kueri dan integrasi Playwright untuk berinteraksi dengan elemen dan mengekstrak data dengan cepat, tepat, dan berskala besar. Termasuk REST API, SDK Python dan JavaScript, serta pemecah masalah peramban.

    1.454+0Perubahan bintang dalam 7 hari terakhir
  • wreq-python@0x676e67

    Klien HTTP Python yang ergonomis dan menjaga privasi

    1.438+1Perubahan bintang dalam 7 hari terakhir
  • rebrowser-patches@rebrowser

    Kumpulan patch untuk puppeteer dan playwright untuk menghindari deteksi otomatisasi dan kebocoran. Membantu menghindari halaman CAPTCHA Cloudflare dan DataDome. Mudah dipatch/unpatch, dapat diaktifkan/dinonaktifkan sesuai kebutuhan.

    1.422-1Perubahan bintang dalam 7 hari terakhir
  • Gunakan Web Scraper API untuk mengekstrak data dari Google Finance, termasuk judul saham, harga, dan perubahan harga dalam persentase.

    1.403+35Perubahan bintang dalam 7 hari terakhir
  • open-scouts@firecrawl

    🔥 Platform pemantauan web berbasis AI. Buat scout otomatis yang mencari di web dan mengirimkan peringatan email saat menemukan apa yang Anda cari.

    1.360+3Perubahan bintang dalam 7 hari terakhir
  • openserp@karust

    SERP API mandiri untuk AI, SEO & otomatisasi. Pencarian Google, Bing, Yandex, Baidu, DuckDuckGo, dan Ecosia yang dirender browser dengan ekstraksi halaman 🎉

    1.335+16Perubahan bintang dalam 7 hari terakhir
  • WebAI2API@foxhui

    WebAI2API: Alat konversi web AI ke API berbasis Camoufox, mendoroang LMArena/Gemini dll, konkurensi multi-jendela dan isolasi akun.

    1.315+16Perubahan bintang dalam 7 hari terakhir
  • httpcloak@sardanioss

    Klien HTTP Go dengan sidik jari TLS/HTTP2 yang identik dengan peramban. Lewati deteksi bot dengan meniru secara sempurna Chrome, Firefox, dan Safari pada tingkat kriptografi (JA3/JA4, sidik jari Akamai, urutan tajuk). Mendukung HTTP/1.1, HTTP/2, HTTP/3, sesi, kuki, dan proksi.

    1.275+15Perubahan bintang dalam 7 hari terakhir
  • Decodo@Decodo

    Proksi residensial berotasi HTTP(S)/SOCKS5 - contoh kode & informasi umum.

    1.244+5Perubahan bintang dalam 7 hari terakhir
  • user-agents@intoli

    Pustaka JavaScript untuk menghasilkan user agent acak dengan data yang diperbarui setiap hari.

    1.188-1Perubahan bintang dalam 7 hari terakhir
  • miasma@austin-weeks

    Jebak web scraper AI dalam lubang racun tanpa akhir.

    1.179+5Perubahan bintang dalam 7 hari terakhir
  • faster-than-requests@juancarlospaco

    Permintaan lebih cepat pada Python 3

    1.128-1Perubahan bintang dalam 7 hari terakhir
  • reverse-api-engineer@nottelabs

    Agen yang mengubah situs web menjadi API!

    1.121+17Perubahan bintang dalam 7 hari terakhir
  • kimuraframework@vifreefly

    Tulis web scraper di Ruby menggunakan DSL bersih yang dibantu AI. Kimurai menggunakan AI untuk mengetahui letak data, lalu melakukan cache pada selector dan melakukan scraping dengan Ruby murni. Dapatkan kecerdasan LLM tanpa latensi per permintaan atau biaya token.

    1.102+0Perubahan bintang dalam 7 hari terakhir
  • scrapfly-scrapers@scrapfly

    Skrip web scraping Python yang dapat diskalakan untuk +40 domain populer

    1.077+5Perubahan bintang dalam 7 hari terakhir
  • awesome-agent-apis@Anil-matcha

    Daftar kurasi sumber daya, alat, keahlian, tutorial & artikel OpenClaw. OpenClaw (sebelumnya Moltbot / Clawdbot) — agen AI open-source yang di-hosting sendiri untuk WhatsApp, Telegram, Discord & 50+ integrasi.

    1.005+8Perubahan bintang dalam 7 hari terakhir
  • x-reader@runesleo

    MCP Server pembaca konten universal untuk 10+ platform

    961+4Perubahan bintang dalam 7 hari terakhir
  • crw@us

    Alternatif Firecrawl/Tavily yang cepat dan ringan dalam Rust. Web scraper, crawler & search API dengan server MCP untuk AI agent. Kompatibel dengan API Firecrawl (/scrape, /crawl, /search). 2,3x lebih cepat dari Tavily, 1,5x lebih cepat dari Firecrawl dalam benchmark 1K-URL. RAM 6 MB, biner tunggal. Dapat di-self-host atau menggunakan cloud terkelola.

    959+90Perubahan bintang dalam 7 hari terakhir
  • Mengumpulkan respons terstruktur dari scraper ChatGPT dengan mengirimkan prompt menggunakan kredensial API scraping ChatGPT yang valid. Aktifkan pencarian langsung, masukkan konteks HTML, dan otomatisasi alur kerja scraper ChatGPT yang cerdas hanya dengan beberapa parameter.

    916+160Perubahan bintang dalam 7 hari terakhir
  • ShardBrowser@ProxyShard

    Peluncur peramban anti-deteksi sumber terbuka gratis untuk web scraping dan multi-akun. Oleh tim ProxyShard. Pemalsuan sidik jari tingkat mesin di Chromium 148 (WebGL / WebGPU / Client Hints / font / TLS), dilengkapi 170+ profil perangkat, QUIC + WebRTC stabil melalui SOCKS5.

    909+159Perubahan bintang dalam 7 hari terakhir
  • Keterampilan Agent Resmi dari produk Oxylabs

    870+105Perubahan bintang dalam 7 hari terakhir
← Kembali ke topik