scraping-api

このGitHubリポジトリは、シンプルな自動化からフルスケールのアプリケーションまで、あらゆるものを構築するためにすぐに使用できる、開発者向けの強力なスクレイピングAPIのコレクションです。

検索、商品、出品、レビュー、Q&A、ベストセラー、出品者データを抽出するための無料トライアル版Amazon Scraper API。

Python と Oxylabs SERP API を使用して Google トレンドのデータをスクレイピングし、結果を比較する方法をステップバイステップで学ぶ。キーワード、人気度、地域別の内訳、関連クエリなどを抽出します。

Python と Oxylabs API を使用して公開されている Google データをスクレイピングする方法を紹介するチュートリアル

Rust製の高速で軽量な Firecrawl/Tavily 代替ツール。AI エージェント向け MCP サーバーを備えた Web スクレイパー、クローラー、検索 API。Firecrawl 互換 API (/scrape, /crawl, /search) をドロップインで利用可能。1K-URL のベンチマークでは Tavily の 2.3 倍、Firecrawl の 1.5 倍高速。6 MB RAM、シングルバイナリ。セルフホストまたはマネージドクラウドに対応。

有効な ChatGPT スクレイピング API 認証情報を使用してプロンプトを送信し、ChatGPT スクレイパーから構造化された応答を収集します。わずか数個のパラメータでライブ検索を有効にし、HTML コンテキストを注入し、インテリジェントなスクレイパー ChatGPT ワークフローを自動化します。