data-collection

Crawler/spider web visual tanpa kode. Perangkat lunak otomatisasi browser/pengumpulan data/web crawler visual yang memungkinkan desain dan eksekusi tugas crawler secara grafis tanpa kode.

Pemindahan data sumber terbuka untuk pipeline ELT dan agen AI — dari API, database & file ke gudang data, danau data, dan aplikasi AI. Tersedia dalam versi self-hosted dan Cloud.

Repositori GitHub ini adalah kumpulan API canggih yang dapat langsung Anda gunakan untuk membangun apa saja, mulai dari otomatisasi sederhana hingga aplikasi berskala penuh. Salah satu daftar API paling berharga di GitHub. 💪

🔥 Server MCP Firecrawl Resmi - Menambahkan web scraping dan pencarian canggih ke Cursor, Claude, dan klien LLM lainnya.

Pemimpin dalam Infrastruktur Data Pelanggan

Pipeline data untuk konfigurasi cloud dan data keamanan. Membangun inventaris aset cloud, CSPM, FinOps, dan solusi manajemen kerentanan. Mengekstrak data dari AWS, Azure, GCP, serta lebih dari 70 sumber cloud dan SaaS.

Jitsu adalah alternatif open-source untuk Segment. Mesin pengumpulan data yang dapat diprogram sepenuhnya untuk tim data modern. Siapkan pipeline data real-time dalam hitungan menit, bukan hari.

Pustaka Python dan CLI untuk scraping X/Twitter dengan rotasi multi-akun dan penanganan pembatasan tarif bawaan.

Server Model Context Protocol (MCP) canggih yang menyediakan solusi lengkap untuk akses web publik.

Scrape tweet, profil, follower, dan following dari Twitter/X, tanpa perlu kunci API. Pustaka Python dengan pengelompokan multi-akun cerdas, dukungan proxy, dan async.

Python konkurensi dibuat menjadi sederhana

Proksi residensial berotasi HTTP(S)/SOCKS5 - contoh kode & informasi umum.

IoT DC3 adalah platform IoT industri open-source yang multi-protokol, cloud-native, didukung AI, dan berkembang menuju AI agents. Solusi sistem IoT yang lengkap: konektivitas perangkat, akuisisi data, pengiriman edge-to-cloud, dan operasi cerdas.

Plugin Analisis Pemain untuk platform Server Minecraft - Lihat aktivitas pemain server Anda dengan mudah. :calendar:

🌊 Sinkronisasikan sistem tempat data Anda berada secara terus-menerus ke sistem tempat Anda _menginginkannya_ berada, dengan mengelola aliran data Anda menggunakan Estuary. 🌊

ODK Collect adalah aplikasi Android untuk mengisi formulir. Telah digunakan untuk mengumpulkan miliaran titik data di lingkungan yang menantang di seluruh dunia. Berkontribusilah dan jadikan dunia tempat yang lebih baik! ✨📋✨

Saat Augur menemui kendala, kami membuat Aveloxis: Pengumpulan data metrik OSS yang andal. Mengumpulkan 40.000 repositori secara penuh dalam 3 hari, cukup bagus bukan?

Platform akuisisi dan ekstraksi big data. zdh_web adalah platform manajemen visual untuk layanan seri zdh, yang mencakup modul pengumpulan data, penjadwalan, izin, alur persetujuan, pemasaran privat, dan lainnya