crawler

Kasus pembalikan web scraper, selesai: Sidik jari TLS | Rishu | Zhenkunhang | NetEase Dun | Dekompilasi reverse mini program WeChat (Baidatrangxing) | Tonghuashun | Dekripsi RPC | Jiasule | Kode verifikasi geser Geetest | Juliang Suanshu | Boss Zhipin | Qichacha | China Minmetals | QQ Music | Platform Data Besar Kebijakan Industri | Qizhidao | Xueqiu (acw_sc__v2) | 1688 | Qimai Data | Whggzy | Qiming Technology | Mohurd | Entrust Data | OKLink

SiteOne Crawler adalah perayap dan penganalisis situs web lintas platform untuk SEO, keamanan, aksesibilitas, dan optimasi performa—ideal untuk pengembang, DevOps, insinyur QA, dan konsultan. Mendukung Windows, macOS, dan Linux (x64 dan arm64).

HTTP API untuk spider Scrapy

API Pemecah Captcha, Email Sementara berkinerja tinggi dan asinkron untuk Douyin, TikTok, Xiaohongshu, Kuaishou, Weibo, Instagram, YouTube, dan Twitter (X).

Pustaka pengujian/pengikisan/penguraian berbasis Kotlin yang menyediakan kemampuan untuk menganalisis dan mengekstrak data dari HTML (yang dirender di sisi server & klien). Pustaka ini sangat menekankan pada kemudahan penggunaan dan tingkat keterbacaan yang tinggi dengan menyediakan DSL yang intuitif. Bertujuan sebagai pustaka pengujian, tetapi juga dapat digunakan untuk mengikis situs web dengan cara yang mudah.

ArrowDL (Arrow Downloader) adalah manajer unduhan untuk Windows, MacOS, dan Linux

Pustaka web spidering Ruby serbaguna yang dapat melakukan spidering pada situs, beberapa domain, tautan tertentu, atau tanpa batas. Spidr dirancang agar cepat dan mudah digunakan.

ai reverse serba cepat

Kode tutorial web scraping Python yang sederhana namun berguna.

API Java untuk Chrome dan Firefox

Pengunduh Doujinshi (绅士漫画下载)

Alat rekayasa balik cookie JS: alat visualisasi pemantauan perubahan cookie JS & hook cookie JS untuk menetapkan breakpoint bersyarat.

Alat audit SEO sumber terbuka.

🕵️‍♂️ Scraper profil LinkedIn yang mengembalikan data profil terstruktur dalam format JSON.

Repositori kode untuk buku "Praktik Lanjutan Pembalikan Web Crawler"

Kerangka kerja web crawler yang ringan.

The Big Brother V6.0 adalah platform OSINT yang dilengkapi dengan enumerasi nama pengguna (473+ platform), intelijen visual quad-vector, pelacakan Sky Radar, analisis dompet kripto, intelijen SSL, rekonstruksi jejak digital, ekstraksi EXIF, dorking tingkat lanjut, dan pengintaian jaringan.

:newspaper: Biarkan ChatGPT Meringkas Hacker News untuk Anda

Aplikasi Cadangan Blog Tumblr dan Twitter

Pustaka PTT terbaik

Wscan adalah pemindai keamanan web yang berfokus pada keamanan web, didedikasikan untuk membuat keamanan web dapat diakses oleh semua orang.

Mencari di Google, Bing, Yahoo, dan mesin pencari lainnya dengan Python

Repositori resmi untuk "Craw4LLM: Efficient Web Crawling for LLM Pretraining"

NetDiscovery adalah kerangka kerja/middleware web crawler universal yang diimplementasikan menggunakan kerangka kerja seperti Vert.x dan RxJava 2.

Krawl adalah server penipuan web dan anti-crawler yang dapat disesuaikan, ringan, dan native-cloud yang membuat aplikasi web palsu dengan kerentanan yang mudah diakses menggunakan data umpan acak yang realistis dan templat HTML buatan AI.

Menyimpan halaman web secara lokal ke hard disk Anda beserta gambar, css, js, dan tautan apa adanya.

Moodle-DL mengunduh konten kursus dengan cepat dari Moodle (misalnya PDF kuliah)

Jie menonjol sebagai alat penilaian dan eksploitasi keamanan yang komprehensif yang dibuat secara teliti untuk aplikasi web. Rangkaian fitur tangguhnya mencakup pemindaian kerentanan, pengumpulan informasi, dan eksploitasi, menjadikannya toolkit yang sangat penting bagi para profesional keamanan dan penetration tester. Alat bantu peretasan (pemindaian kerentanan, pengumpulan informasi)

kerangka kerja web crawling & scraping tingkat tinggi yang andal untuk Node.js.

Infrastruktur web sumber terbuka untuk AI. Mengikis, merayapi, dan mengotomatiskan web, membersihkan markdown, sesi peramban, siap untuk agen Anda.