data-collection

Ein visueller No-Code/Code-freier Web-Crawler/Spider易采集：ein visuelles, codefreies Web-Crawler/Spider-Software, mit dem man Aufgaben ohne Programmierung grafisch planen und ausführen kann. Alias: ServiceWrapper, ein intelligentes Service-Wrapper-System für Web-Anwendungen.

Open-Source-Datentransfer für ELT-Pipelines und KI-Agenten – von APIs, Datenbanken und Dateien bis hin zu Warehouses, Lakes und KI-Anwendungen. Sowohl selbst gehostet als auch in der Cloud.

Dieses GitHub-Repository ist eine leistungsstarke Sammlung von APIs, die Sie sofort nutzen können, um alles von einfachen Automatisierungen bis hin zu vollwertigen Anwendungen zu entwickeln. Eine der wertvollsten API-Listen auf GitHub überhaupt. 💪

🔥 Offizieller Firecrawl MCP Server – Fügt leistungsstarkes Web-Scraping und -Suchen zu Cursor, Claude und anderen LLM-Clients hinzu.

Der Marktführer für Customer Data Infrastructure

Datenpipelines für Cloud-Konfiguration und Sicherheitsdaten. Erstellen Sie Lösungen für Cloud-Asset-Inventar, CSPM, FinOps und Schwachstellenmanagement. Extrahieren Sie Daten aus AWS, Azure, GCP und über 70 Cloud- und SaaS-Quellen.

Jitsu ist eine Open-Source-Alternative zu Segment. Vollständig skriptfähige Daten-Ingestion-Engine für moderne Datenteams. Richten Sie in Minuten statt Tagen eine Echtzeit-Datenpipeline ein.

Python-Bibliothek und CLI für X/Twitter-Scraping mit Multi-Account-Rotation und integrierter Ratenbegrenzungsverarbeitung.

Ein leistungsstarker Model Context Protocol (MCP)-Server, der eine All-in-One-Lösung für den Zugriff auf das öffentliche Web bietet.

Twitter/X-Tweets, Profile, Follower und Abonnements ohne API-Schlüssel scrapen. Python-Bibliothek mit intelligentem Multi-Account-Pooling, Proxy-Unterstützung und Async.

Nebenläufiges Python leicht gemacht

HTTP(S)/SOCKS5 rotierende Residential Proxies – Codebeispiele & allgemeine Informationen.

IoT DC3 ist eine protokollübergreifende, Cloud-native, KI-gestützte Open-Source-IoT-Plattform, die sich zu KI-Agenten weiterentwickelt. Eine vollständige IoT-Systemlösung: Gerätekonnektivität, Datenerfassung, Edge-to-Cloud-Bereitstellung und intelligenter Betrieb.

Player-Analytics-Plugin für Minecraft-Serverplattformen – Sehen Sie die Spieleraktivität Ihres Servers ganz einfach ein. :calendar:

🌊 Synchronisieren Sie kontinuierlich die Systeme, in denen sich Ihre Daten befinden, mit den Systemen, in denen Sie sie haben möchten, indem Sie Ihre Datenströme mit Estuary verwalten. 🌊

ODK Collect ist eine Android-App zum Ausfüllen von Formularen. Sie wurde weltweit in anspruchsvollen Umgebungen zur Erfassung von Milliarden Datenpunkten eingesetzt. Tragen Sie dazu bei, die Welt zu einem besseren Ort zu machen! ✨📋✨

Als Augur an seine Grenzen stieß, entwickelten wir Aveloxis: Zuverlässiges Sammeln von OSS-Metrikdaten. 40.000 Repositories in 3 Tagen vollständig zu erfassen ist gut, oder?

Plattform für Big-Data-Erfassung und -Extraktion; zdh_web ist die visuelle Verwaltungsplattform für die zdh-Dienste, die Module für Datenerfassung, Scheduling, Berechtigungen, Genehmigungsworkflows und privates Marketing umfasst