crawler

FreeProxy: Mengumpulkan proksi gratis dari internet. (Proksi gratis berkualitas tinggi dalam jumlah besar di seluruh dunia, mendukung scraping dari puluhan sumber berbagi proksi gratis, mendukung penyaringan proksi aturan kustom, wajib dimiliki untuk web scraping dan analisis data, diperbarui setiap hari dengan proksi gratis dalam jumlah besar.)

Merayapi dan mengekstrak halaman web (reguler atau onion) melalui jaringan TOR

Sebuah framework untuk membuat ekstraktor konten web semi-otomatis