web-scraping
Repositori open source terpantau bertanda web-scraping, diurutkan berdasarkan bintang.
- #61
Pustaka python analisis Finviz.
★ 1.624+0Perubahan bintang dalam 7 hari terakhir - #62★ 1.620+0Perubahan bintang dalam 7 hari terakhir
- #63
Scrape tweet, profil, follower, dan following dari Twitter/X, tanpa perlu kunci API. Pustaka Python dengan pengelompokan multi-akun cerdas, dukungan proxy, dan async.
★ 1.607+2Perubahan bintang dalam 7 hari terakhir - #64
AI Map adalah alat pemetaan situs web bertenaga AI dari Oxylabs AI Studio yang menggunakan prompt bahasa alami untuk menemukan dan mengekstrak URL yang relevan dari situs web mana pun secara cerdas.
★ 1.598+41Perubahan bintang dalam 7 hari terakhir - #65
Alat CLI untuk menyimpan salinan otentik dari halaman web lengkap dalam satu file HTML (berbasis SingleFile)
★ 1.579+9Perubahan bintang dalam 7 hari terakhir - #66★ 1.520+0Perubahan bintang dalam 7 hari terakhir
- #67
Versi Python yang tidak terdeteksi dari pustaka pengujian dan otomatisasi Playwright.
★ 1.492+5Perubahan bintang dalam 7 hari terakhir - #68
❤️ Fredy - [F]ind [R]eal [E]state [D]amn Eas[y] - Fredy terus mencari apartemen dan rumah baru di Eropa pada platform seperti ImmoScout24, Immowelt, eBay Kleinanzeigen dan langsung mengirimkan hasilnya kepada Anda melalui Slack, Telegram, Email, Discord, atau ntfy, sehingga Anda dapat fokus pada hal-hal yang lebih penting dalam hidup ;)
★ 1.462+11Perubahan bintang dalam 7 hari terakhir - #69★ 1.455+0Perubahan bintang dalam 7 hari terakhir
- #70
AgentQL adalah rangkaian alat untuk menghubungkan AI Anda ke web. Menampilkan bahasa kueri dan integrasi Playwright untuk berinteraksi dengan elemen dan mengekstrak data dengan cepat, tepat, dan berskala besar. Termasuk REST API, SDK Python dan JavaScript, serta pemecah masalah peramban.
★ 1.454+0Perubahan bintang dalam 7 hari terakhir - #71
Klien HTTP Python yang ergonomis dan menjaga privasi
★ 1.438+1Perubahan bintang dalam 7 hari terakhir - #72
Kumpulan patch untuk puppeteer dan playwright untuk menghindari deteksi otomatisasi dan kebocoran. Membantu menghindari halaman CAPTCHA Cloudflare dan DataDome. Mudah dipatch/unpatch, dapat diaktifkan/dinonaktifkan sesuai kebutuhan.
★ 1.422-1Perubahan bintang dalam 7 hari terakhir - #73
Gunakan Web Scraper API untuk mengekstrak data dari Google Finance, termasuk judul saham, harga, dan perubahan harga dalam persentase.
★ 1.403+35Perubahan bintang dalam 7 hari terakhir - #74
🔥 Platform pemantauan web berbasis AI. Buat scout otomatis yang mencari di web dan mengirimkan peringatan email saat menemukan apa yang Anda cari.
★ 1.360+3Perubahan bintang dalam 7 hari terakhir - #75
SERP API mandiri untuk AI, SEO & otomatisasi. Pencarian Google, Bing, Yandex, Baidu, DuckDuckGo, dan Ecosia yang dirender browser dengan ekstraksi halaman 🎉
★ 1.335+16Perubahan bintang dalam 7 hari terakhir - #76
WebAI2API: Alat konversi web AI ke API berbasis Camoufox, mendoroang LMArena/Gemini dll, konkurensi multi-jendela dan isolasi akun.
★ 1.315+16Perubahan bintang dalam 7 hari terakhir - #77
Klien HTTP Go dengan sidik jari TLS/HTTP2 yang identik dengan peramban. Lewati deteksi bot dengan meniru secara sempurna Chrome, Firefox, dan Safari pada tingkat kriptografi (JA3/JA4, sidik jari Akamai, urutan tajuk). Mendukung HTTP/1.1, HTTP/2, HTTP/3, sesi, kuki, dan proksi.
★ 1.275+15Perubahan bintang dalam 7 hari terakhir - #78★ 1.244+5Perubahan bintang dalam 7 hari terakhir
- #79
Pustaka JavaScript untuk menghasilkan user agent acak dengan data yang diperbarui setiap hari.
★ 1.188-1Perubahan bintang dalam 7 hari terakhir - #80★ 1.179+5Perubahan bintang dalam 7 hari terakhir
- #81
Permintaan lebih cepat pada Python 3
★ 1.128-1Perubahan bintang dalam 7 hari terakhir - #82
Agen yang mengubah situs web menjadi API!
★ 1.121+17Perubahan bintang dalam 7 hari terakhir - #83
Tulis web scraper di Ruby menggunakan DSL bersih yang dibantu AI. Kimurai menggunakan AI untuk mengetahui letak data, lalu melakukan cache pada selector dan melakukan scraping dengan Ruby murni. Dapatkan kecerdasan LLM tanpa latensi per permintaan atau biaya token.
★ 1.102+0Perubahan bintang dalam 7 hari terakhir - #84
Skrip web scraping Python yang dapat diskalakan untuk +40 domain populer
★ 1.077+5Perubahan bintang dalam 7 hari terakhir - #85
Daftar kurasi sumber daya, alat, keahlian, tutorial & artikel OpenClaw. OpenClaw (sebelumnya Moltbot / Clawdbot) — agen AI open-source yang di-hosting sendiri untuk WhatsApp, Telegram, Discord & 50+ integrasi.
★ 1.005+8Perubahan bintang dalam 7 hari terakhir - #86★ 961+4Perubahan bintang dalam 7 hari terakhir
- #87
Alternatif Firecrawl/Tavily yang cepat dan ringan dalam Rust. Web scraper, crawler & search API dengan server MCP untuk AI agent. Kompatibel dengan API Firecrawl (/scrape, /crawl, /search). 2,3x lebih cepat dari Tavily, 1,5x lebih cepat dari Firecrawl dalam benchmark 1K-URL. RAM 6 MB, biner tunggal. Dapat di-self-host atau menggunakan cloud terkelola.
★ 959+90Perubahan bintang dalam 7 hari terakhir - #88
Mengumpulkan respons terstruktur dari scraper ChatGPT dengan mengirimkan prompt menggunakan kredensial API scraping ChatGPT yang valid. Aktifkan pencarian langsung, masukkan konteks HTML, dan otomatisasi alur kerja scraper ChatGPT yang cerdas hanya dengan beberapa parameter.
★ 916+160Perubahan bintang dalam 7 hari terakhir - #89
Peluncur peramban anti-deteksi sumber terbuka gratis untuk web scraping dan multi-akun. Oleh tim ProxyShard. Pemalsuan sidik jari tingkat mesin di Chromium 148 (WebGL / WebGPU / Client Hints / font / TLS), dilengkapi 170+ profil perangkat, QUIC + WebRTC stabil melalui SOCKS5.
★ 909+159Perubahan bintang dalam 7 hari terakhir - #90
Keterampilan Agent Resmi dari produk Oxylabs
★ 870+105Perubahan bintang dalam 7 hari terakhir