scraper
Các kho mã nguồn mở đang theo dõi được gắn thẻ scraper, sắp xếp theo số sao.
- #31
Trình cào dữ liệu Node.js để lấy dữ liệu từ Google Play
★ 2.956+4Thay đổi số sao trong 7 ngày qua - #32
Học từng bước cách cào dữ liệu Google Trends và so sánh kết quả bằng Python và Oxylabs SERP API. Trích xuất từ khóa, độ phổ biến, phân tích theo khu vực, truy vấn liên quan và nhiều hơn nữa.
★ 2.909+35Thay đổi số sao trong 7 ngày qua - #33
Geziyor, framework cào và thu thập dữ liệu web cực nhanh dành cho Go. Hỗ trợ kết xuất JS.
★ 2.776+0Thay đổi số sao trong 7 ngày qua - #34
Trích xuất metadata từ bất kỳ URL nào sử dụng Open Graph, JSON-LD, thẻ meta HTML và cơ chế dự phòng thông minh.
★ 2.734+2Thay đổi số sao trong 7 ngày qua - #35
Thư viện Python và CLI để trích xuất dữ liệu X/Twitter với cơ chế xoay vòng nhiều tài khoản và xử lý giới hạn tần suất tích hợp.
★ 2.732+14Thay đổi số sao trong 7 ngày qua - #36★ 2.690-1Thay đổi số sao trong 7 ngày qua
- #37
Tải xuống và lưu trữ nội dung từ reddit
★ 2.608+1Thay đổi số sao trong 7 ngày qua - #38
API cào web mã nguồn mở. Chuyển đổi mọi trang web thành markdown sạch hoặc JSON có cấu trúc. Trình duyệt chống phát hiện, tự động chọn proxy, tự lưu trữ. Một lệnh: make up
★ 2.599+222Thay đổi số sao trong 7 ngày qua - #39
Chuyển đổi nội dung web thành dữ liệu sẵn sàng cho LLM
★ 2.158+32Thay đổi số sao trong 7 ngày qua - #40
Thư viện Node.js để nhận sự kiện phát trực tiếp (bình luận, quà tặng, v.v.) theo thời gian thực từ TikTok LIVE.
★ 2.139+4Thay đổi số sao trong 7 ngày qua - #41
Máy chủ MCP tài liệu kỹ thuật hoàn toàn miễn phí, riêng tư, có giao diện. Được thiết kế dành cho lập trình viên và kỹ sư phần mềm. Dễ dàng tích hợp vào Cursor, Windsurf, Cline, Roo Code, Claude Desktop App
★ 2.105-1Thay đổi số sao trong 7 ngày qua - #42
Thư viện cốt lõi của NewPipe để trích xuất dữ liệu từ các trang web phát streaming
★ 1.960+3Thay đổi số sao trong 7 ngày qua - #43
Tìm hiểu cách xây dựng trình cào Google Jobs của riêng bạn, có thể cào đồng thời Google Jobs cho nhiều truy vấn tìm kiếm và vị trí địa lý bằng Python và API Google Jobs Scraper của Oxylabs. https://oxylabs.io/blog/how-to-scrape-google-jobs
★ 1.767+35Thay đổi số sao trong 7 ngày qua - #44
Trình thu thập dữ liệu Google Play để thu thập thông tin công khai về ứng dụng, trò chơi, phim ảnh & chương trình TV, sách và nhiều nội dung khác.
★ 1.757+24Thay đổi số sao trong 7 ngày qua - #45
Tải xuống trang web vào thư mục cục bộ (bao gồm tất cả css, hình ảnh, js, v.v.)
★ 1.751-1Thay đổi số sao trong 7 ngày qua - #46
Python binding cho các engine Modest và Lexbor. Trình phân tích cú pháp HTML5 nhanh chóng hỗ trợ CSS selectors cho Python.
★ 1.671+4Thay đổi số sao trong 7 ngày qua - #47★ 1.662+0Thay đổi số sao trong 7 ngày qua
- #48
Bot Instagram giống con người, hoàn toàn miễn phí và mã nguồn mở. Được hỗ trợ bởi UIAutomator2 và tương thích với hầu hết mọi thiết bị Android 5.0+ có thể chạy Instagram - thiết bị thật hoặc máy ảo.
★ 1.634+2Thay đổi số sao trong 7 ngày qua - #49
Cào tweet, hồ sơ, người theo dõi và đang theo dõi từ Twitter/X, không cần khóa API. Thư viện Python với tính năng gộp nhiều tài khoản thông minh, hỗ trợ proxy và bất đồng bộ.
★ 1.607+2Thay đổi số sao trong 7 ngày qua - #50★ 1.554+0Thay đổi số sao trong 7 ngày qua
- #51
Trình tải xuống và phát trực tuyến anime hiệu quả cao, nhanh chóng, mạnh mẽ và nhẹ dành cho bộ anime yêu thích của bạn.
★ 1.522+0Thay đổi số sao trong 7 ngày qua - #52
Công cụ đổi tên tự động cho phim truyền hình/anime, đổi tên hàng loạt chỉ với một cú nhấp chuột. Có thể kết hợp với QBittorrent để tự động đổi tên sau khi tải xuống, thuận tiện cho việc cào dữ liệu của Emby. Hỗ trợ chạy trên các môi trường Windows, Linux, MacOS, Docker và Synology.
★ 1.491+0Thay đổi số sao trong 7 ngày qua - #53
Một HTTP Client bằng Python có tính công thái học và bảo vệ quyền riêng tư
★ 1.438+1Thay đổi số sao trong 7 ngày qua - #54★ 1.386+1Thay đổi số sao trong 7 ngày qua
- #55
Trình thu thập/cạo dữ liệu web Ruby nhẹ với DSL thanh lịch, trích xuất dữ liệu có cấu trúc từ các trang.
★ 1.360+0Thay đổi số sao trong 7 ngày qua - #56
Lấy dữ liệu bài đăng/hồ sơ/hashtag Instagram mà không cần sử dụng API Instagram
★ 1.352+1Thay đổi số sao trong 7 ngày qua - #57★ 1.332+1Thay đổi số sao trong 7 ngày qua
- #58
Cinemagoer là một gói Python hữu ích để truy xuất và quản lý dữ liệu từ cơ sở dữ liệu phim IMDb (mà chúng tôi không liên kết dưới bất kỳ hình thức nào) về phim, người và nhân vật
★ 1.323+0Thay đổi số sao trong 7 ngày qua - #59
Trang web gương của Anime Garden | Trang tổng hợp tài nguyên BT anime | Giao diện mở cho tài nguyên BT anime
★ 1.301+4Thay đổi số sao trong 7 ngày qua - #60
Trình thu thập dữ liệu việc làm BOSS Zhipin dựa trên giao thức Chrome CDP để tái sử dụng trạng thái đăng nhập thực tế, vượt qua cơ chế chống thu thập font chữ, xuất dữ liệu lương dạng văn bản thuần túy JSON/CSV + phân tích kỹ năng lương.
★ 1.282+33Thay đổi số sao trong 7 ngày qua