apify/crawlee

Crawlee—A web scraping and browser automation library for Node.js zur Erstellung zuverlässiger Crawler. In JavaScript und TypeScript. Daten für KI, LLMs, RAG oder GPTs extrahieren. HTML, PDF, JPG, PNG und andere Dateien von Websites herunterladen. Funktioniert mit Puppeteer, Playwright, Cheerio, JSDOM und raw HTTP. Sowohl headful als auch headless-Modus. Mit Proxy-Rotation.

↗ Auf GitHub öffnen

Sterne

25.622

Forks

1.657

Sprache

TypeScript

Lizenz

Apache-2.0

Letzter Push

vor 4 Tagen

TypeScript javascript typescript nodejs playwright scraper automation crawler scraping web-scraping npm web-crawler crawling headless-chrome puppeteer headless web-crawling apify

Noch keine verwandte Intel

Dieses Repo ist noch in keiner der vom Radar verfolgten Quellen aufgetaucht. Der Collector läuft nach Zeitplan — schau wieder vorbei, sobald er dieses Repo abdeckt.

Verwandte Intel (0)

Noch keine verwandte Intel