lk_scraper

LinkedIn Scraper Extrae cualquier dato de LinkedIn Instalación root@kitploit: $ pip install git+git://github.com/jqueguiner/lkscraper Configuración Usando Docker compose root@kitploit: $ docker-compose up -d $ docker-compose run lkscraper python3 Usando Docker solo para el servidor de Selenium...

Scrapegraph-ai

🚀 想要一种更快、更简单的大规模抓取方式（只需 5 行代码）？ 请查看我们在 ScrapeGraphAI.com 上的增强版本！🚀 🕷️ ScrapeGraphAI：你只需抓取一次 English | 中文 | 日本語 | 한국어 | Русский | Türkçe | Deutsch | Español | français | Português | Italiano ScrapeGraphAI 是一个 网页抓取 Python 库，它利用 LLM 和直接图逻辑为网站和本地文档（XML、HTML、JSON、Markdown 等）创建抓取管道。...

fetchfox

FetchFox FetchFox es una librería de scraping, automatización y extracción de datos impulsada por IA. Puede extraer datos de cualquier página web usando solo inglés sencillo. Está creado por los desarrolladores del scraper AI de FetchFox. Primeros pasos Instala el paquete y Playwright:...

darkdump

darkdump Acerca de Darkdump es una herramienta OSINT de código abierto para la investigación en la web profunda. Dada una consulta de búsqueda, obtiene resultados de múltiples motores de búsqueda de la dark web, opcionalmente extrae de cada sitio de resultados correos electrónicos, metadatos,...

camoufox

Camoufox Camoufoxは、ウェブスクレイピングとAIエージェントのために構築されたオープンソースのアンチディテクトブラウザです。🦊 ⚠️ このプロジェクトは開発中です。安定した本番環境での使用には適さない可能性があります。 ⚠️ !NOTE 最新のドキュメントはすべてcamoufox.comで入手できます。 !NOTE ブラウザの開発はgithub.com/CloverLabsAI/camoufoxとgithub.com/VulpineOS/VulpineOSで活発に行われています。...

git-dump

git-dump This script is a tool to recursively download the contents of the '.git' directory from a website. Using Python and libraries like 'requests' and 'BeautifulSoup', this script examines the directory structure, downloads files, and identifies SHA-1 hashes within Git files. Feature...

requests-ip-rotator

Orgullosamente patrocinado por Swiftproxy Proxies residenciales de alto rendimiento con un grupo de más de 80 millones de IPs en más de 195 países — mejore las tasas de éxito de las solicitudes y reduzca los bloqueos de IP durante la recolección de datos a gran escala y la automatización de...

tiktok-scraper

TikTok Scraper & Downloader Extrae y descarga información útil de TikTok. No se requieren inicio de sesión ni contraseña Esto no es un soporte de API oficial ni nada por el estilo. Es solo un scraper que utiliza la API web de TikTok para extraer contenido multimedia e información meta relacionada...

Valid8Proxy

Si encuentras útil este repositorio de GitHub, ¡considera darle una estrella! ⭐️ .png Valid8Proxy es una herramienta rápida y eficiente diseñada para obtener, validar y almacenar proxies funcionales HTTP, HTTPS, SOCKS4, SOCKS5 y Mixed. Perfecta para web scraping, OSINT, automatización o pruebas de...

firecrawl-mcp-server

Firecrawl MCP Server Un servidor del Protocolo de Contexto del Modelo MCP que lleva Firecrawl a agentes de IA compatibles con MCP: busca, extrae e interactúa con la web en vivo para obtener contexto limpio y listo para el agente. Un gran agradecimiento a @vrknetha y @knacklabs por la implementaci...

words-scraper

Words Scraper Web scraper basado en Selenium para generar listas de contraseñas. Instalación root@kitploit: Download Firefox webdriver from https://github.com/mozilla/geckodriver/releases $ tar xzf geckodriver-vVERSION-HERE.tar.gz $ sudo mv geckodriver /usr/local/bin Make sure it is in your PATH ...

API-dnsdumpster.com

DNSDumpster API UNOFFICIAL ⚠️ IMPORTANT DISCLAIMER : This is an UNOFFICIAL API wrapper for dnsdumpster.com that scrapes the public website. DNSDumpster.com offers an official API plan for commercial and heavy usage. If you need reliable, production-grade access, please consider their official API:...

Scrapling

Effortless Web Scraping for the Modern Web العربيه | Español | Português Brasil | Français | Deutsch | 简体中文 | 日本語 | Русский | 한국어 Selection methods · Fetchers · Spiders · Proxy Rotation · CLI · MCP Scrapling is an adaptive Web Scraping framework that handles everythi...

username-anarchy

Username Anarchy Version: 0.6 20 September 2024 Author: urbanadventurer Andrew Horton Homepage: https://www.morningstarsecurity.com/research/username-anarchy Source: https://github.com/urbanadventurer/username-anarchy/ License: MIT Description Tools for generating usernames when penetration...

bing-ip2hosts

Bing-ip2hosts Bing-ip2hosts は、IP アドレスからホスト名を発見するための Bing.com ウェブスクレイパーです。 説明 Bing-ip2hosts は、IP アドレスからホスト名を発見する Bing.com ウェブスクレイパーです。Bing は、かつて MSN Search や Live Search として知られていた Microsoft の主力検索エンジンです。 これは検索エンジン独自の機能を提供します。IP アドレスによる検索が可能です。Bing-ip2hosts はこの機能を利用します。...

camoufox

Camoufox Camoufox is an open source anti-detect browser built for webscraping & AI agents. 🦊 ⚠️ This project is under development. It may not be suitable for stable production use. ⚠️ !NOTE All of the latest documentation is available atcamoufox.com. !NOTE Browser development is active at...

DefaScan

Defascan: Defacement Scan and Alert root@kitploit: | \ / | | | | |/ \ | / / |/ / | ' \ | || | / | | \ \ | | | | | | |/ || ,|/\,|| || Defascan is a python tool that will scrape the internet for your given google dork queries using APIs and alert using the email provied during rutime. Installation...

gorilla

gorilla gorilla is the ultimate wordlist tool packing a lot of amazing utilities like: building wordlists based on patterns like crunch building wordlists based on common password/username formats like cupp scrap a web page and build a wordlist from its words like cewl extending existing wordlist...

Security_Article

SecurityArticle sito web scrapy, Articolo e link ... 0x01 Nuovo progetto 0x02 Definire l'obiettivo 0x03 Creare il crawler 0x04 Salvare i contenuti es. pip3 install lxml,scrapy root@kitploit: 文章标题 ArticleTitle //@id="wrapper"/main/div/article/header/h5/a/text...

SEcraper

SEcraper Strumento di scraping per motori di ricerca con script BASH. Dipendenze curl cli Motori di ricerca disponibili Ask.com Search.yahoo.com Bing.com Installazione root@kitploit: git clone https://github.com/zerobyte-id/SEcraper.git cd SEcraper/ Esecuzione root@kitploit: bash secraper.bash...