scraping

Geziyor, ein blitzschnelles Web-Crawling- und Scraping-Framework für Go. Unterstützt JS-Rendering.

Python-Bibliothek und CLI für X/Twitter-Scraping mit Multi-Account-Rotation und integrierter Ratenbegrenzungsverarbeitung.

Webdaten für KI-Agenten und LLMs abrufen

Ein leistungsstarker Model Context Protocol (MCP)-Server, der eine All-in-One-Lösung für den Zugriff auf das öffentliche Web bietet.

Erweiterter Privacy-Browser-Kern mit einheitlicher Fingerprint-Abwehr: Cloudflare, Akamai, Kasada, Shape, DataDome, PerimeterX, hCaptcha, FunCaptcha, Imperva, reCAPTCHA, ThreatMetrix, Adscore

Browser-Fingerprinting-Tools zur Anonymisierung Ihrer Scraper. Entwickelt von Apify.

Eine kuratierte Liste fantastischer Puppeteer-Ressourcen.

Ein CLI-Dienstprogramm zum Erstellen von Screenshots von Websites, Aufnehmen von Video-Demos und Scraping von Websites mit JavaScript

Web-Scraping-Framework

OSINT-Spickzettel, Liste von OSINT-Tools, Wiki, Datensätze, Artikel, Bücher, Red-Team-OSINT für Hacker sowie OSINT-Tipps und -Zweige.

Informationen von jedem Webdienst oder jeder Webseite abrufen

Kostenloser Antidetect-Browser-Stealth für Playwright: unerkannter Headless-Firefox-Fingerprint. Python-Scraping, Umgehung von Recaptcha und Bot-Erkennung. Open Source

Internet-in-a-Box - Erstelle deine eigene BIBLIOTHEK VON ALEXANDRIA mit einem Raspberry Pi!

Liste von Anti-Detect- und Humanisierungs-Tools und -Browsern, einschließlich Captcha-Solvern und SMS-Aktivierung.

Verstecken Sie die IP Ihrer Scraper hinter der Cloud. Stellen Sie Proxy-Server über verschiedene Cloud-Anbieter bereit, um den Erfolg Ihres Scrapings zu verbessern.

In diesem Tutorial zeigen wir, wie man öffentliche Google-Daten mit Python und der Oxylabs API scrapt.

Erhalte saubere Daten aus schwierigen Dokumenten, unterstützt durch Vision-Language-Modelle ⚡

AgentQL ist eine Suite von Tools zur Anbindung Ihrer KI an das Web. Es bietet eine Abfragesprache und Playwright-Integrationen zur schnellen, präzisen und skalierbaren Interaktion mit Elementen sowie zum Extrahieren von Daten. Inklusive REST-API, Python- und JavaScript-SDKs sowie Browser-Debugger.

Sammlung von Patches für Puppeteer und Playwright zur Vermeidung von Automatisierungserkennung und Leaks. Hilft dabei, Cloudflare- und DataDome-CAPTCHA-Seiten zu umgehen. Einfach zu patchen/entpatchen, bei Bedarf ein- und ausschaltbar.

🤖 Automatisches Scrapen von Daten von HTML-Websites durch einfaches Bereitstellen von Beispielen

📰 Brasilianische Amtsblätter für jeden zugänglich | 📰 Brazilian government gazettes, accessible to everyone.

Open-Source-Bulk-Auto-Gmail-Creator-Bot mit Selenium & Seleniumwire (Python). Kontaktiere mich gerne für Django/Flask, ML, AI, GPT, Automation, Scraping.

Leichte Bibliothek zum Scraping von Webseiten mit LLMs

Mit Parsel können Sie Daten aus XML/HTML-Dokumenten mithilfe von XPath- oder CSS-Selektoren extrahieren

Alles direkt aus dem Terminal heraus betrachten.

HTTP(S)/SOCKS5 rotierende Residential Proxies – Codebeispiele & allgemeine Informationen.

🎭 Intelligenter Browser-Header- und Fingerprint-Generator.

:rocket: Eine Open-Source-Alternative zu searx, die eine modern aussehende :sparkles:, blitzschnelle :zap:, datenschutzfreundliche :disguised_face:, sichere :lock: Metasuchmaschine bereitstellt

Modulares Service-Framework zum Versenden und Transformieren von Netzwerkpaketen

Tools für verschiedene Online-Judge-Plattformen. Herunterladen von Testfällen, Generieren zusätzlicher Testfälle, Testen Ihres Codes und Einreichen.