z0m31en7/Uscrapper
Uscrapper Vanta: Dive deeper into the web with this powerful open-source tool. Extract valuable insights with ease and efficiency, from both surface and deep web sources. Empower your data mining and analysis with Vanta's advanced capabilities. Fast, reliable, and user-friendly, Uscrapper Vanta is the ultimate choice for researchers and analysts.
Thành tựu nổi bật
Những danh hiệu mới nhất của dự án
#1 Repository Của Tháng
#1 Repository Của Tháng
#1 Repository Của Tháng
🔍 Uscrapper Vanta: Công cụ OSINT thu thập dữ liệu từ web bề mặt, sâu và dark web
Uscrapper Vanta kết hợp kỹ thuật crawl and scrape đa luồng, hỗ trợ .onion và trích xuất thông tin cá nhân từ cả nguồn siêu liên kết và không siêu liên kết.
Uscrapper Vanta là bản nâng cấp mạnh mẽ từ Uscrapper, tập trung vào khai thác tính năng OSINT (Open-Source Intelligence). Dự án cho phép người dùng khai thác sâu và rộng trên web, bao gồm cả khu vực dark web thông qua hỗ trợ đường link .onion. Với mô hình trích xuất từ khóa thông minh, Uscrapper Vanta giúp thu thập email, số điện thoại, tên tác giả, vị trí địa lý, tên người dùng và link mạng xã hội từ cả nguồn có liên kết và không liên kết.
✨ Điểm nổi bật
- Hỗ trợ Dark Web: Có khả năng xử lý đường link .onion, mở rộng khả năng thu thập từ nguồn chưa tiếp cận.
- Trích xuất theo từ khóa: Tìm kiếm và lọc thông tin dựa trên danh sách từ khóa do người dùng cung cấp.
- Crawl & Scrape cùng lúc: Thu thập dữ liệu từ nhiều trang trong cùng một miền.
- Đa luồng (Multithreading): Tối ưu tốc độ xử lý bằng cách chia tải cho nhiều luồng.
- Chống chặn anti-scraping: Sử dụng Selenium để vượt qua các biện pháp chống scrape.
- Báo cáo đầy đủ: Tạo báo cáo tổng hợp dữ liệu đã được trích xuất.
- Thu thập thông tin đa dạng: Email, số điện thoại, tên tác giả, vị trí địa lý, tên người dùng, link mạng xã hội.
💡 Vì sao đáng chú ý
Không giống các công cụ scrape thông thường chỉ tập trung vào một số thành phần nhất định, Uscrapper Vanta cung cấp một giải pháp toàn diện, kết hợp khả năng thu thập từ cả web bề mặt lẫn dark web. Điều này giúp các nhà nghiên cứu và phân tích thông tin có cái nhìn toàn cảnh hơn về mạng lưới số. Ngoài ra, tích hợp Selenium giúp vượt qua các rào cản bảo mật phổ biến, dù có thể làm chậm quá trình xử lý.
#OSINT #WebScraping #Python #DarkWeb #InformationExtraction #DataMining #TiniX
Dự án tương tự
Khám phá các dự án và mô hình AI khác có sự tương đồng.
Hunt down social media accounts by username across social networks
Tookie is a advanced OSINT information gathering tool that finds social media accounts based on inputs.
Supercharge your AI agents with data from the web and beyond. Building the library for superintelligence. 🔥
API, CLI, and Web App for analyzing and finding a person's profile in 1000 social media \ websites
reNgine is an automated reconnaissance framework for web applications with a focus on highly configurable streamlined recon process via Engines, recon data correlation and organization, continuous monitoring, backed by a database, and simple yet intuitive User Interface. reNgine makes it easy for penetration testers to gather reconnaissance with minimal configuration and with the help of reNgine's correlation, it just makes recon effortless.
🕷️ The BEST Web Scraping framework that handles everything from a single request to a full-scale crawl! Don't be shy, join here: https://discord.gg/EMgGbDceNQ and follow here for daily tips and tricks: https://x.com/Scrapling_dev