crawl

INFO-SPIDER adalah kotak peralatan crawler yang mengintegrasikan banyak sumber data 🧰, yang bertujuan untuk membantu pengguna mendapatkan kembali data mereka dengan aman dan cepat, kode alat bersifat open-source, dan prosesnya transparan. Sumber data yang didukung termasuk GitHub, QQ Mail, NetEase Mail, Ali Mail, Sina Mail, Hotmail, Outlook Mail, JD.com, Taobao, Alipay, China Mobile, China Unicom, China Telecom, Zhihu, Bilibili, NetEase Cloud Music, QQ Friends, QQ Groups, Generate WeChat Moments Albums, Browser History, 12306, CSDN Blog, OSChina Blog, Jianshu.

novel-plus adalah sistem CMS novel multi-platform (PC, WAP) dengan fitur lengkap, mencakup rekomendasi, pencarian, peringkat, pembacaan, rak buku, ulasan, crawler novel, pusat anggota, area penulis, langganan isi ulang, dan publikasi berita.

AnyCrawl 🚀: Crawler Node.js/TypeScript yang mengubah situs web menjadi data siap-LLM dan mengekstrak hasil SERP terstruktur dari Google/Bing/Baidu/dll. Multithreading bawaan untuk pemrosesan massal.

Enkapsulasi permintaan berdasarkan sisi web Xiaohongshu. https://reajason.github.io/xhs/

Perpustakaan crawler Node.js yang fleksibel dan dibantu oleh AI

Web crawler sang arsiparis: output WARC, dasbor untuk semua proses crawl, pola abaikan dinamis

Kumpulan artikel reverse engineering menarik yang telah dikunjungi, layak untuk dibaca

Tavily Python SDK memungkinkan interaksi yang mudah dengan Tavily API, menawarkan fungsionalitas pencarian, ekstraksi, perayapan, pemetaan, dan penelitian lengkap langsung dari program Python Anda. Integrasikan kemampuan pencarian cerdas, ekstraksi konten, dan penelitian dengan mudah ke dalam aplikasi Anda, dengan memanfaatkan fitur-fitur canggih Tavily.

JS破解逆向，破解JS反爬虫加密参数，已破解极验滑块w（2022.2.19），QQ音乐sign（2022.2.13），拼多多anti_content，boss直聘zp_token，知乎x-zse-96，酷狗kg_mid/dfid，唯品会mars_cid，中国裁判文书网（2020-06-30更新），淘宝密码，天安保险登录，b站登录，房天下登录，WPS登录，微博登录，有道翻译，网易登录，微信公众号登录，空中网登录，今目标登录，学生信息管理系统登录，共赢金融登录，重庆科技资源共享平台登录，网易云音乐下载，一键解析视频链接，财联社登录。

Konverter dan crawler HTML ke Markdown.