Jbin-website-secret-scraper

🎖️ Jbin 会收集网站上所有的 URL，然后尝试从这些 URL 中暴露秘密数据。它同时收集 URL 和 JS 链接以抓取其中的秘密。此外，如果你在页面中查找特定字符串或想运行自定义正则表达式，现在也可以通过新版本实现，它还会为你提供一份信息丰富的报告。 它是如何工作的？ 第三方组件 Wayback API 安装 要求：Python-3.8.5, Flask 1. 安装 flask pip install Flask 2. 安装依赖项 pip install -r requirements.txt 3. 设置环境变量 export FLASKAPP=app.py 4...

Snap-Scraper

Snap Scraper 描述 Snap Scraper 是一款开源情报工具，能根据一组经纬度坐标下载上传至 Snapchat Snap Map 的媒体内容。本项目绝不与 Snap 公司或任何其附属机构、子公司有关联、授权、维护、赞助或认可。本程序仅用于教育、取证及错误报告目的，且不提供任何担保。 使用本工具时请引用以下出版物： 1. Richard Matthews, Kieren Lovell, Matthew Sorell, Ghost protocol – Snapchat as a method of surveillance, Forensic Science...

fb_friend_list_scraper

Facebook 好友列表抓取器 用于从 Facebook 的大规模好友列表中抓取姓名和用户名，且不受速率限制的 OSINT 工具。 （在 Mastodon 上找我：@[email protected]） 开始使用： 使用 pip 安装：python -m pip install fb-friend-list-scraper 脚本安装后以 fbfriendlistscraper 命令运行 使用 -h 或 --help 运行以显示使用信息。 用法： root@kitploit: usage: fbfriendlistscraper -h -e EMAIL -p PASSWORD ...

pepeScraper

pepeScraper - 4chan爬虫 一个完整的4chan爬虫（现在速度快了。） pepeScraper 是一个使用上下文进行搜索并精确返回你想要内容的爬虫。 （我正在学习如何让一个东西看起来比实际更酷） 输入关键词，任何你能想到的（只是小心你搜索的内容 👀） 按日期控制结果，排除你不希望出现的内容。 控制这个程序的搜索速度（不要混淆处理线程和4chan线程） 目录 安装 标志 隐私与数据存储 小心 奇怪的东西 安装 如果你使用Windows，直接前往发布页下载最新版本，然后安装依赖项。 如果你想提供帮助并访问源代码，请使用下面的代码。 root@kitploit: git clo...

bing-ip2hosts

Bing-ip2hosts Bing-ip2hosts is a Bing.com web scraper to discover hostnames by IP address. Description Bing-ip2hosts is a Bing.com web scraper that discovers hostnames by IP address. Bing is the flagship Microsoft search engine formerly known as MSN Search and Live Search. It provides a feature...

evine

Evine Interactive CLI Web Crawler. Evine is a simple, fast, and interactive web crawler and web scraper written in Golang. Evine is useful for a wide range of purposes such as metadata and data extraction, data mining, reconnaissance and testing. If you like the project, give it a star. It forces...

IOCScraper

IOC Scraper IOC Scraper 利用 IOCPARSER 服务从不同厂商的博客、PDF 和 CSV 文件中获取 IOC。解析 IOC 是一个耗时过程，使用当前脚本可以轻松自动提取和聚合 IOC。 功能 去混淆 IOC：支持提取和去混淆 IOC。 白名单 IOC：支持自定义 IOC 白名单。 源类型：支持多种来源，如博客、PDF、CSV 等。 支持的 IOC 类型 IOC Scraper 支持多种 IOC 类型。 IOC 类型| 状态 ---|--- ASN| 支持 IPv4、IPv6| 支持 URL、域名| 支持 Email| 支持 MD5、SHA1、SHA256、文件名...

linkedin-profile-scraper

由于端点问题，LinkedIn个人资料爬虫工具目前不可用。 请查看下方链接以获取替代方法。特别感谢 gosecure 团队。 https://www.gosecure.net/blog/2021/05/27/step-by-step-how-to-deanonymize-emails-on-linkedin/ LinkedIn个人资料爬虫工具 LinkedIn个人资料查找器 Python 脚本已添加到 i-will-tell-you osint 框架中。 执行命令： 1 = email,password="Yourmailid","yourlinkedinpassword"...

OnionSearch

OnionSearch 👋 你好！如有任何专业咨询或合作，请通过以下邮箱联系我： [email protected] 📧 请尽量使用专业邮箱进行通信。让我们保持简洁高效，并使用英文交流！ 比特币捐赠地址：1FHDM49QfZX6pJmhjLE5tB2K6CaTLMZpXZ 仅用于教育目的 OnionSearch 是一个 Python3 脚本，用于在不同 ".onion" 搜索引擎上抓取 URL。 演示 💡 先决条件 Python 3 📚 当前支持的搜索引擎 ahmia darksearchio onionland notevil darksearchenginer phobos...

tiktok-scraper

TikTok 爬虫与下载器 从 TikTok 抓取并下载有用信息。 无需登录或密码。 这不是官方 API 支持等。这只是一个使用 TikTok Web API 抓取媒体的爬虫。 特性 根据用户名、话题标签或趋势抓取视频帖子 下载并将媒体保存为 ZIP 压缩包 创建包含帖子信息的 JSON/CSV 文件 注意： 如果需要下载所有视频帖子，则将 number 设置为 0 帖子 - JSON/CSV 输出： root@kitploit: id: '6748606789551410438', text:'TEXT', createTime: '1571282470', authorId:...

graphicator

Graphicator Graphicator is a GraphQL "scraper" / extractor. The tool iterates over the introspection document returned by the targeted GraphQL endpoint, and then re-structures the schema in an internal form so it can re-create the supported queries. When such queries are created is using them to...

graphicator

Graphicator Graphicator 是一个 GraphQL "抓取器" / 提取器。该工具会遍历目标 GraphQL 端点返回的内省文档，然后重新构建内部形式的 schema，以便重新创建支持的查询。当这些查询创建完成后，工具会使用它们向端点发送请求，并将返回的响应保存到文件中。 错误的响应不会被保存。默认情况下，工具会缓存正确的响应以及错误信息，因此重新运行工具时不会重复执行相同的查询。 请明智地使用它，并且仅在你拥有权限的目标上进行操作。 我们希望该工具能帮助你作为渗透测试人员自动化自己的测试，同时也能推动那些尚未进行 GraphQL 测试的人开始行动。 了解如何对...

patch-checker

PatchChecker This is the code base for the service running on: https://patchchecker.com. In short, PatchChecker is a web application running on flask that provides output similar to that of Watson. However by using PatchChecker, one is not required to execute a binary on the target machine...

patch-checker

PatchChecker 这是运行在 https://patchchecker.com 上的服务的代码库。 简而言之，PatchChecker 是一个 Web 应用程序（基于 Flask 运行），提供与 Watson 类似的输出。然而，使用 PatchChecker 无需在目标机器上执行二进制文件。 该项目还包含一个网络爬虫，它会利用 Microsoft 网站上的信息自动更新 PatchChecker 的数据库，从而提供一种更可扩展且更易用的解决方案，用于查找 Windows 系统已（或未）修补的 CVE。 此外，任何其他 CVE 都可以添加到数据收集器的输入中，只要它们在...

linkedin2username

linkedin2username OSINT 工具：从 LinkedIn 上的公司生成用户名列表。 这是一个纯网页爬虫，无需 API 密钥。您使用有效的 LinkedIn 用户名和密码登录，它将为您指定的公司的所有员工生成多个可能的用户名格式列表。 以下是您将获得的内容： first.last.txt: 用户名如 Joe.Schmoe f.last.txt: 用户名如 J.Schmoe flast.txt: 用户名如 JSchmoe firstl.txt: 用户名如 JoeS first.txt 用户名如 Joe lastf.txt 用户名如 SchmoeJ rawnames.txt:...

linkedin2username

linkedin2username OSINT Tool: Generate username lists from companies on LinkedIn. This is a pure web-scraper, no API key required. You use your valid LinkedIn username and password to login, it will create several lists of possible username formats for all employees of a company you point it at...

spider

Spider El rastreador y extractor web más rápido para Rust. · · · ·...

falla

FAllA 一款针对超过15个搜索引擎的CLI爬虫工具，包括Google、duckduckgo、Bing、Ask等。 注意： 仅用于教育目的，本人不对该工具的滥用负责！ 环境要求 Python（3.x） Docker-CE（并非所有搜索引擎都需要，仅部分搜索需要） 如何安装 你需要安装所有依赖： root@kitploit: pip3 install -r requirements.txt 安装geckodriver： root@kitploit: For linux users sudo apt install firefox-geckodriver For other OS's...

snapchat-map-scraper

Snapchat 故事下载器 该程序可以搜索 Snapchat 的公开 Snap Map 在多个地点并下载所有故事，以便后续调查和 分类。关于 Snapchat 如何决定哪些视频出现在地图上的哪个“点”，目前尚不清楚，因此爬取器还可以将爬取的地理位置随机化几百米，以期让 API 提供更多相关视频。 已在 Linux 上测试过，但应该也能在 Windows/Mac 上运行（需安装视频播放器）。 安装说明 root@kitploit: git clone https://github.com/nemec/snapchat-map-scraper.git cd...

cve-collector

CVE-Collector 用Python编写的简易最新CVE收集器 收集最新CVE（通用漏洞与暴露）信息有多种方法。 此代码旨在为创建CVE收集器时如何收集、包含哪些信息以及如何编码提供指导。 此处提供的代码仅是实现CVE收集器的众多方式之一。 它使用一种方法编写：爬取特定网站、解析HTML元素并检索数据。 该收集器使用 https://www.cvedetails.com 上的搜索查询来收集严重性评分为6或更高的漏洞信息。 功能特点 它创建一个简单的基于分隔符的文件作为数据库（无需数据库管理系统）。 当发现新的CVE时，它还会检索"漏洞详细信息"。 设置方法 1. 设置...