J
md-webcrawl-mcp
By jmh108·Visit Source
用于提取网站内容的Python MCP网络爬虫
2025年4月18日
22 days ago
0 Clicks
什么是MCP
这是一个基于Python的模型上下文协议(MCP)实现,设计用作网络爬虫,用于以Markdown格式提取和保存网站内容。
如何使用这个MCP
该MCP可通过FastMCP安装,并通过环境变量配置。它提供诸如extract_content
和scan_linked_content
等命令,用于爬取网站和创建内容索引。
这个MCP的用途
该MCP可用于内容提取、网站结构映射、URL批量处理以及创建可搜索的网页内容Markdown存档。
Repository Info
Stars:
2
Forks:
-
Watchers:
2
Last Updated: 1 month ago