资产目录

SKILL

browser-fingerprinting

Analysis of Bot Protection systems with available countermeasures 🚿

原作者：niespodd 来源：GitHub 许可：未标注 含内容副本 · 可下载 存档：v1 · 2026-09-27 hash e68cab9c

SKILL

hakrawler

Simple, fast web crawler designed for easy, quick discovery of endpoints and assets within a web application

原作者：hakluke 来源：GitHub 许可：GPL-3.0-only 含内容副本 · 可下载 存档：v1 · 2026-09-27 hash 45ffc700

SKILL

TorBot

Dark Web OSINT Tool

原作者：DedSecInside 来源：GitHub 许可：GPL-3.0-only 含内容副本 · 可下载 存档：v1 · 2026-09-27 hash d639de2a

SKILL

Crawler_Illegal_Cases_In_China

Collection of China illegal cases about web crawler 本项目用来整理所有中国大陆爬虫开发者涉诉与违规相关的新闻、资料与法律法规

原作者：hiddendevj 来源：GitHub 许可：未标注 含内容副本 · 可下载 存档：v1 · 2026-09-27 hash bb265bc6

SKILL

CrawlerTutorial

爬虫入门、爬虫进阶、高级爬虫

原作者：NanmiCoder 来源：GitHub 许可：未标注 含内容副本 · 可下载 存档：v1 · 2026-09-27 hash 7349b68f

SKILL

weibo-crawler

新浪微博爬虫，用python爬取新浪微博数据，并下载微博图片和微博视频

原作者：dataabc 来源：GitHub 许可：未标注 含内容副本 · 可下载 存档：v2 · 2026-10-26 hash 1f15de9b

SKILL

crawler4j

Open Source Web Crawler for Java

原作者：yasserg 来源：GitHub 许可：Apache-2.0 含内容副本 · 可下载 存档：v1 · 2026-09-27 hash d69ce04a

SKILL

myGPTReader

A community-driven way to read and chat with AI bots - powered by chatGPT

原作者：myreader-io 来源：GitHub 许可：MIT 含内容副本 · 可下载 存档：v1 · 2026-09-27 hash 07cfccd8

SKILL

bitmagnet

A self-hosted BitTorrent indexer, DHT crawler, content classifier and torrent search engine with web UI, GraphQL API and…

原作者：bitmagnet-io 来源：GitHub 许可：MIT 含内容副本 · 可下载 存档：v1 · 2026-09-27 hash be067301

SKILL

work_crawler

Download comics novels 小说漫画下载工具 小説漫画のダウンローダ 小說漫畫下載:腾讯漫画 大角虫漫画 有妖气 咪咕 SF漫画 哦漫画 看漫画 漫画柜 汗汗酷漫 動漫伊甸園 快看漫画 微博动漫 733动漫网 大古漫画网 …

原作者：kanasimi 来源：GitHub 许可：BSD-3-Clause 含内容副本 · 可下载 存档：v1 · 2026-09-27 hash 6041d61e

SKILL

ProxyBroker

Proxy [Finder | Checker | Server]

原作者：constverum 来源：GitHub 许可：Apache-2.0 含内容副本 · 可下载 存档：v1 · 2026-09-27 hash bd8eede5

SKILL

arachni

Web Application Security Scanner Framework

原作者：Arachni 来源：GitHub 许可：Proprietary 含内容副本 · 可下载 存档：v1 · 2026-09-27 hash bacd3b4e

SKILL

proxypool

Automatically crawls proxy nodes on the public internet, de-duplicates and tests for usability and then provides a list …

原作者：zu1k 来源：GitHub 许可：GPL-3.0-only 含内容副本 · 可下载 存档：v1 · 2026-09-27 hash 96fbca3d

SKILL

dom-crawler

Eases DOM navigation for HTML and XML documents

原作者：symfony 来源：GitHub 许可：MIT 含内容副本 · 可下载 存档：v1 · 2026-09-27 hash 1fd98449

SKILL

scylla

Intelligent proxy pool for Humans™ to extract content from the internet and build your own Large Language Models in this…

原作者：MikeChongCan 来源：GitHub 许可：Apache-2.0 含内容副本 · 可下载 存档：v1 · 2026-09-27 hash 788c80ae

SKILL

puppeteer-sharp

Headless Chrome

原作者：hardkoded 来源：GitHub 许可：MIT 含内容副本 · 可下载 存档：v1 · 2026-09-27 hash 19f025e9

SKILL

cariddi

Take a list of domains, crawl urls and scan for endpoints, secrets, api keys, file extensions, tokens and more

原作者：edoardottt 来源：GitHub 许可：GPL-3.0-only 含内容副本 · 可下载 存档：v1 · 2026-09-27 hash 1dbffa6e

SKILL

RED_HAWK

All in one tool for Information Gathering, Vulnerability Scanning and Crawling

原作者：Tuhinshubhra 来源：GitHub 许可：MIT 含内容副本 · 可下载 存档：v1 · 2026-09-27 hash 63cbb26f

SKILL

feapder

🚀🚀🚀feapder is an easy to use, powerful crawler framework | feapder是一款上手简单，功能强大的Python爬虫框架

原作者：Boris-code 来源：GitHub 许可：MIT 含内容副本 · 可下载 存档：v1 · 2026-09-27 hash 41ca17b3

SKILL

mdcx

Movie metadata scraper

原作者：sqzw-x 来源：GitHub 许可：GPL-3.0-only 含内容副本 · 可下载 存档：v1 · 2026-09-27 hash e4c7ff6f