apify

Crawlee — 用于 Node.js 的网页抓取与浏览器自动化库，支持 JavaScript 与 TypeScript。可为 AI、LLM、RAG 或 GPT 抽取数据，下载 HTML、PDF、JPG、PNG 等文件，兼容 Puppeteer、Playwright、Cheerio、JSDOM 与原始 HTTP，支持有头与无头模式，并提供代理轮换。

Crawlee — 用于 Python 的网页抓取和浏览器自动化库，用于构建可靠的爬虫。提取 AI、LLM、RAG 或 GPT 的数据，下载 HTML、PDF、JPG、PNG 等文件，兼容 Parsel、BeautifulSoup、Playwright 与原始 HTTP，支持有头和无头模式，并具代理轮换功能。

此 GitHub 仓库是 API 的强大集合，可立即使用，从简单自动化到全规模应用皆可构建。GitHub 上最有价值的 API 清单——毫无疑问。💪

Apify agent 技能集合

从 Twitter/X 抓取推文、个人资料、粉丝与关注中，无需 API 密钥。具备智能多账号池化、代理支持与异步的 Python 库。