scrapy
scrapy टैग वाली ट्रैक की गई ओपन सोर्स रिपॉजिटरी, स्टार के हिसाब से क्रमबद्ध।
मिलते-जुलते विषय
वे विषय जो अक्सर एक ही रिपॉजिटरी पर scrapy के साथ आते हैं।
हाल में उभरे
पिछले 90 दिनों में बनी और scrapy टैग वाली रिपॉजिटरी।
पिछले 90 दिनों में इस विषय के टैग वाली कोई नई रिपॉजिटरी नहीं आई।
- #1
भाषाओं और फ्रेमवर्क की परवाह किए बिना स्पाइडर प्रबंधन के लिए डिस्ट्रिब्यूटेड वेब क्रॉलर एडमिन प्लेटफ़ॉर्म।
★ 12,268+4पिछले 7 दिनों में स्टार का बदलाव - #2
सोसौ वेइचैट सर्च पर आधारित वेइचैट ऑफिशियल अकाउंट क्रॉलर इंटरफ़ेस
★ 6,378+0पिछले 7 दिनों में स्टार का बदलाव - #3
विभिन्न वेबसाइटों और ई-कॉमर्स डेटा के लिए व्यावहारिक वेब स्क्रेपर्स। इसमें Taobao, WeChat, Dianping, Qichacha, जॉब वेबसाइट्स, Xianyu, Alibaba, Cnblogs, Weibo, Baidu Tieba, Douban, Baotu, Quanjiwang, और कई अन्य प्लेटफ़ॉर्म शामिल हैं।
★ 5,670+4पिछले 7 दिनों में स्टार का बदलाव - #4
Scrapy के लिए Redis-आधारित घटक।
★ 5,643+1पिछले 7 दिनों में स्टार का बदलाव - #5
लगातार मेंटेन किया जाने वाला Sina Weibo स्क्रैपिंग टूल 🚀🚀🚀
★ 4,112+2पिछले 7 दिनों में स्टार का बदलाव - #6
🚀🚀🚀 feapder एक उपयोग में आसान, शक्तिशाली क्रॉलर फ्रेमवर्क है। इसमें AirSpider, Spider, TaskSpider, और BatchSpider जैसे विभिन्न परिदृश्यों के लिए चार प्रकार के क्रॉलर शामिल हैं।
★ 3,732-3पिछले 7 दिनों में स्टार का बदलाव - #7
Scrapy, Scrapyd, Django और Vue.js पर आधारित डिस्ट्रिब्यूटेड क्रॉलर मैनेजमेंट फ्रेमवर्क
★ 3,512+0पिछले 7 दिनों में स्टार का बदलाव - #8
Scrapyd क्लस्टर प्रबंधन, Scrapy लॉग विश्लेषण और विज़ुअलाइज़ेशन, ऑटो पैकेजिंग, टाइमर कार्यों, मॉनिटर और अलर्ट, और मोबाइल UI के लिए वेब ऐप। डॉक्स दस्तावेज़ :point_right:
★ 3,411+1पिछले 7 दिनों में स्टार का बदलाव - #9
JavaScript एकीकरण के लिए Scrapy+Splash
★ 3,227+0पिछले 7 दिनों में स्टार का बदलाव - #10
Google, Bing और Baidu से इमेज डाउनलोड करें।
★ 2,360-2पिछले 7 दिनों में स्टार का बदलाव - #11
वेब स्क्रैपिंग ओपन प्रोजेक्ट रिपॉजिटरी का उद्देश्य Python के साथ वेब स्क्रैपिंग के बारे में ज्ञान और अनुभव साझा करना है
★ 1,735+0पिछले 7 दिनों में स्टार का बदलाव - #12
advertools - ऑनलाइन मार्केटिंग उत्पादकता और विश्लेषण उपकरण
★ 1,450+2पिछले 7 दिनों में स्टार का बदलाव - #13
Scrapy के लिए 🎭 Playwright इंटीग्रेशन।
★ 1,442+3पिछले 7 दिनों में स्टार का बदलाव - #14★ 1,157+1पिछले 7 दिनों में स्टार का बदलाव
- #15
Python वेब क्रॉलर
★ 1,151+0पिछले 7 दिनों में स्टार का बदलाव - #16
Python 3 पर तेज़ अनुरोध
★ 1,128-1पिछले 7 दिनों में स्टार का बदलाव - #17★ 1,128+1पिछले 7 दिनों में स्टार का बदलाव
- #18
एक साफ, AI-सहायता प्राप्त DSL का उपयोग करके Ruby में वेब स्क्रैपर लिखें। Kimurai यह पता लगाने के लिए AI का उपयोग करता है कि डेटा कहाँ है, फिर सेलेक्टर को कैश करता है और शुद्ध Ruby के साथ स्क्रैप करता है।
★ 1,102+0पिछले 7 दिनों में स्टार का बदलाव - #19
Selenium का उपयोग करके जावास्क्रिप्ट पेजों को संभालने के लिए Scrapy मिडलवेयर।
★ 950+0पिछले 7 दिनों में स्टार का बदलाव - #20★ 933+1पिछले 7 दिनों में स्टार का बदलाव
- #21★ 884+2पिछले 7 दिनों में स्टार का बदलाव
- #22
उच्च-प्रदर्शन वाला एसिंक्रोनस Douyin, TikTok, Xiaohongshu, Kuaishou, Weibo, Instagram, YouTube, Twitter(X) कैप्चा सॉल्वर और टेम्प मेल API।
★ 877+10पिछले 7 दिनों में स्टार का बदलाव - #23
Xianyu क्रॉलर, जो वेब संस्करण पर आधारित है और FastAPI का उपयोग करके बनाया गया है, जो एसिंक्रोनस अनुरोधों और स्वचालित डेटा डिडुप्लीकेशन का समर्थन करता है। अब लॉगिन का समर्थन करता है।
★ 841+19पिछले 7 दिनों में स्टार का बदलाव - #24
इंटरनेट पर अपना स्थान पोस्ट करने वाले स्थानों से स्थान की जानकारी निकालने के लिए स्पाइडर और स्क्रैपर का एक सेट।
★ 822+6पिछले 7 दिनों में स्टार का बदलाव - #25
सरल लेकिन उपयोगी Python वेब स्क्रैपिंग ट्यूटोरियल कोड।
★ 820+0पिछले 7 दिनों में स्टार का बदलाव - #26
Scrapy के साथ एकाधिक प्रॉक्सी का उपयोग करें।
★ 772+0पिछले 7 दिनों में स्टार का बदलाव - #27
एंटरप्राइज-ग्रेड पब्लिक ओपिनियन न्यूज़ क्रॉलर प्रोजेक्ट: किसी भी संख्या में क्रॉलर का वन-क्लिक ऑपरेशन, निर्धारित क्रॉलर कार्य, बैच डिलीट, वन-क्लिक परिनियोजन और क्रॉलर मॉनिटरिंग विज़ुअलाइज़ेशन का समर्थन करता है।
★ 686+1पिछले 7 दिनों में स्टार का बदलाव - #28
spider-admin-pro एक विज़ुअल मैनेजमेंट टूल है जो Scrapy+Scrapyd क्रॉलर प्रोजेक्ट व्यू और टास्क शेड्यूलिंग को एकीकृत करता है, यह SpiderAdmin का अपग्रेडेड वर्शन है।
★ 612+0पिछले 7 दिनों में स्टार का बदलाव - #29
PHP के लिए एक यूनिवर्सल वेब-यूटिलिटी।
★ 588+0पिछले 7 दिनों में स्टार का बदलाव - #30★ 504+1पिछले 7 दिनों में स्टार का बदलाव