scraping

Un fork entièrement remanié et redessiné, réimaginé à partir de zéro sur la base du onlyfans-scraper original

Newspaper4k, un fork du célèbre Newspaper3k. Extraction d'articles, de titres et de métadonnées depuis des sites d'actualités.

L'agent qui transforme les sites web en API !

Crawly, un framework de crawling et de scraping web de haut niveau pour Elixir.

Archivage automatique des liens vers des vidéos, images et contenus de réseaux sociaux depuis Google Sheets (et plus encore).

Le moteur d'extraction derrière Maigret : transforme n'importe quelle URL de profil en un enregistrement OSINT structuré sur plus de 150 sites.

Scripts de web scraping Python évolutifs pour plus de 40 domaines populaires

🧹 Package Python pour le nettoyage de texte.

Web scraping pour les humains

Collectez des réponses structurées à partir d'un scraper ChatGPT en envoyant un prompt avec des identifiants d'API de scraping ChatGPT valides. Permet la recherche en direct, l'injection de contexte HTML et l'automatisation de workflows de scraping ChatGPT intelligents en quelques paramètres.

Outil Python pour transformer des pages Notion.so en sites web statiques légers et personnalisables.

Ensemble d'outils en ligne de commande pour générer automatiquement une table des matières pour les fichiers PDF.

Code de tutoriel simple mais utile pour le web scraping en Python.

Moteur de scraping auto-hébergé — contourne tous les défis JS et captchas : Cloudflare, Turnstile, reCAPTCHA, hCaptcha, GeeTest. Alternative à FlareSolverr & Byparr et remplacement direct pour votre suite *arr.

Scraper de profils LinkedIn retournant des données structurées au format JSON

Lookyloo est une interface web permettant de capturer une page web et d'afficher l'arborescence des domaines appelés

😈📚 Une bibliothèque organisée d'articles de recherche et de présentations pour les passionnés de contre-détection et de confidentialité sur le web.

Package Python pip pour les résultats de recherche Google via SERP API

Un moteur de rotation de proxys haute performance avec gestion automatisée des adresses IP et surveillance de l'état en temps réel

Package Python pour le scraping de données immobilières.

Comic-dl est un outil en ligne de commande pour télécharger des mangas et des comics depuis divers sites de comics et de mangas. Sites pris en charge : readcomiconline.to, mangafox.me, comic naver et bien d'autres.

:card_index: Extraire les profils des réseaux sociaux et plus encore avec des expressions régulières

Plongez dans le web scraping et créez un traqueur de prix e-commerce avec Next.js 13 en une seule vidéo pour apprendre l'extraction de données, les tâches cron, l'envoi d'e-mails, le déploiement et plus encore.

Collaboration en bac à sable pour équipes multi-agents : un forum de discussion basé sur Git, où chaque agent est isolé dans son propre environnement éphémère. Transformez un dépôt Git en un forum sécurisé pour agents IA.

Une API pour scraper les sites web des tribunaux américains afin de récupérer des métadonnées.

Kemono pawchive Downloader est une application PyQt5 rapide pour archiver du contenu provenant d'un large éventail de sites, notamment Kemono, Coomer, Bunkr, Erome, Saint2.su, nhentai et Discord. Elle comprend un navigateur de créateurs, un vérificateur de mises à jour et prend en charge les téléchargements multi-thread et multi-parties. Les sessions peuvent être mises en pause, reprises ou récupérées, avec prise en charge des filtres.

La démo la plus simple d'automatisation Chrome par Python et Selenium dans AWS Lambda

Cette application Python est un outil OSINT (Open Source Intelligence) nommé « Ominis OSINT - Web Hunter ». Elle effectue une collecte d'informations en ligne en interrogeant Google pour obtenir des résultats de recherche liés à une requête saisie par l'utilisateur. L'outil extrait les informations pertinentes telles que les titres, les URL et les mentions potentielles de la requête dans les résultats.

Script Python 3 pour extraire et récupérer les employés d'entreprise depuis l'API LinkedIn

Universal Reddit Scraper - Fonctionne sur n'importe quel Subreddit ou utilisateur