web-scraping

Python-Bibliothek für Finviz-Analyse.

Data-Science-Kurs 2015 der General Assembly in Washington, DC

Twitter/X-Tweets, Profile, Follower und Abonnements ohne API-Schlüssel scrapen. Python-Bibliothek mit intelligentem Multi-Account-Pooling, Proxy-Unterstützung und Async.

AI Map ist ein KI-gestütztes Website-Mapping-Tool von Oxylabs AI Studio, das Prompts in natürlicher Sprache nutzt, um relevante URLs von jeder Website intelligent zu entdecken und zu extrahieren.

CLI-Tool zum Speichern einer originalgetreuen Kopie einer vollständigen Webseite in einer einzigen HTML-Datei (basierend auf SingleFile)

Einfaches Web Scraping für R.

Unentdeckte Python-Version der Test- und Automatisierungsbibliothek Playwright.

❤️ Fredy - [F]ind [R]eal [E]state [D]amn Eas[y] - Fredy sucht kontinuierlich nach neuen Wohnungen und Häusern in Europa auf Plattformen wie ImmoScout24, Immowelt, eBay Kleinanzeigen und sendet Ihnen die Ergebnisse sofort über Slack, Telegram, E-Mail, Discord oder ntfy, damit Sie sich auf die wichtigeren Dinge im Leben konzentrieren können ;)

Das vollständige Web-Scraping-Toolkit für PHP.

AgentQL ist eine Suite von Tools zur Anbindung Ihrer KI an das Web. Es bietet eine Abfragesprache und Playwright-Integrationen zur schnellen, präzisen und skalierbaren Interaktion mit Elementen sowie zum Extrahieren von Daten. Inklusive REST-API, Python- und JavaScript-SDKs sowie Browser-Debugger.

Ein ergonomischer, datenschutzfreundlicher Python-HTTP-Client

Sammlung von Patches für Puppeteer und Playwright zur Vermeidung von Automatisierungserkennung und Leaks. Hilft dabei, Cloudflare- und DataDome-CAPTCHA-Seiten zu umgehen. Einfach zu patchen/entpatchen, bei Bedarf ein- und ausschaltbar.

Nutzen Sie die Web Scraper API, um Daten von Google Finance zu extrahieren, einschließlich Aktientiteln, Preisen und Kursänderungen in Prozent.

KI-gestützte Web-Monitoring-Plattform. Erstelle automatisierte Scouts, die das Web durchsuchen und E-Mail-Benachrichtigungen senden, wenn sie finden, wonach du suchst.

Self-hosted SERP-API für KI, SEO & Automatisierung. Im Browser gerenderte Google-, Bing-, Yandex-, Baidu-, DuckDuckGo- und Ecosia-Suche mit Seitenextraktion 🎉

WebAI2API: Ein auf Camoufox basierendes Web-AI-zu-API-Tool, das LMArena/Gemini usw. sowie Mehrfenster-Konkurrenz und Kontoisolierung unterstützt.

Go HTTP-Client mit browseridentischem TLS/HTTP2-Fingerprinting. Umgeht Bot-Erkennung durch perfekte Nachahmung von Chrome, Firefox und Safari auf kryptografischer Ebene (JA3/JA4, Akamai-Fingerprint, Header-Reihenfolge). Unterstützt HTTP/1.1, HTTP/2, HTTP/3, Sitzungen, Cookies und Proxys.

HTTP(S)/SOCKS5 rotierende Residential Proxies – Codebeispiele & allgemeine Informationen.

Eine JavaScript-Bibliothek zur Generierung zufälliger User-Agents mit täglich aktualisierten Daten.

Fängt KI-Web-Scraper in einer endlosen Giftgrube ein.

Schnellere Requests unter Python 3

Der Agent, der Websites in APIs verwandelt!

Schreiben Sie Web-Scraper in Ruby mit einer sauberen, KI-unterstützten DSL. Kimurai nutzt KI, um herauszufinden, wo sich die Daten befinden, speichert dann die Selektoren im Cache und scrapt mit reinem Ruby. Erhalten Sie die Intelligenz eines LLM ohne Latenz pro Anfrage oder Token-Kosten.

Skalierbare Python-Web-Scraping-Skripte für mehr als 40 beliebte Domains

Eine kuratierte Liste von OpenClaw-Ressourcen, Tools, Fähigkeiten, Tutorials und Artikeln. OpenClaw (ehemals Moltbot / Clawdbot) – ein Open-Source, selbst gehosteter KI-Agent für WhatsApp, Telegram, Discord und über 50 Integrationen.

Universal Content Reader MCP-Server für über 10 Plattformen

Schnelle, leichtgewichtige Firecrawl-/Tavily-Alternative in Rust. Web-Scraper, -Crawler und -Such-API mit MCP-Server für KI-Agenten. Drop-in Firecrawl-kompatible API (/scrape, /crawl, /search). 2,3x schneller als Tavily, 1,5x schneller als Firecrawl bei 1K-URL-Benchmarks. 6 MB RAM, einzelne Binärdatei. Selbst hosten oder verwaltete Cloud nutzen.

Sammeln Sie strukturierte Antworten von einem ChatGPT-Scraper, indem Sie einen Prompt mit gültigen ChatGPT-Scraping-API-Zugangsdaten senden. Ermöglicht Live-Suche, das Injizieren von HTML-Kontext und die Automatisierung intelligenter Scraper-ChatGPT-Workflows mit nur wenigen Parametern.

Kostenloser, Open-Source Anti-Detect-Browser-Launcher für Web Scraping und Multi-Accounting. Vom ProxyShard-Team. Fingerprint-Spoofing auf Engine-Ebene in Chromium 148 (WebGL / WebGPU / Client Hints / Fonts / TLS), über 170 integrierte Geräteprofile, stabiles QUIC + WebRTC über SOCKS5.

Offizielle Agent-Skills für Oxylabs-Produkte.