apify

Crawlee—विश्वसनीय crawlers बनाने के लिए Node.js का एक web scraping और browser automation लाइब्रेरी। JavaScript और TypeScript में। AI, LLMs, RAG या GPTs के लिए डेटा एक्सट्रैक्ट करें। वेबसाइटों से HTML, PDF, JPG, PNG और अन्य फ़ाइलें डाउनलोड करें। Puppeteer, Playwright, Cheerio, JSDOM और raw HTTP के साथ काम करता है। headful और headless दोनों मोड उपलब्ध। proxy rotation के साथ।

Crawlee—विश्वसनीय क्रॉलर बनाने के लिए Python के लिए एक वेब स्क्रैपिंग और ब्राउज़र ऑटोमेशन लाइब्रेरी। AI, LLMs, RAG, या GPTs के लिए डेटा निकालें। वेबसाइटों से HTML, PDF, JPG, PNG और अन्य फ़ाइलें डाउनलोड करें। Parsel, BeautifulSoup, Playwright, और raw HTTP के साथ काम करता है। हेडफुल और हेडलेस दोनों मोड। प्रॉक्सी रोटेशन के साथ।

Apify MCP सर्वर आपके AI एजेंटों को Apify स्टोर पर उपलब्ध हजारों तैयार स्क्रैपर, क्रॉलर और स्वचालन टूल का उपयोग करके सोशल मीडिया, खोज इंजन, मानचित्र, ई-कॉमर्स साइटों या किसी अन्य वेबसाइट से डेटा निकालने में सक्षम बनाता है।

आपके स्क्रेपर्स को अनाम बनाने के लिए ब्राउज़र फ़िंगरप्रिंटिंग टूल। Apify द्वारा विकसित।

Apify एजेंट कौशल का संग्रह।

SSL, HTTP/HTTPS, SOCKS5, प्रमाणीकरण और अपस्ट्रीम प्रॉक्सी चेनिंग के समर्थन के साथ प्रॉक्सी सर्वर (Squid जैसा) का Node.js कार्यान्वयन।

got पर आधारित स्क्रैपिंग के लिए बनाया गया HTTP क्लाइंट

MCP के लिए एक यूनिवर्सल CLI क्लाइंट। mcpc पर्सिस्टेंट सेशन, stdio/HTTP, OAuth 2.1, टास्क, कोड मोड के लिए JSON आउटपुट, AI सैंडबॉक्स के लिए प्रॉक्सी, x402 और अन्य का समर्थन करता है।

impit | ब्राउज़र इंपर्सनेशन के लिए Rust लाइब्रेरी