MCP HubMCP Hub
J

md-webcrawl-mcp

By jmh108·Visit Source
用于提取网站内容的Python MCP网络爬虫
2025年4月18日
22 days ago
0 Clicks

什么是MCP

这是一个基于Python的模型上下文协议(MCP)实现,设计用作网络爬虫,用于以Markdown格式提取和保存网站内容。

如何使用这个MCP

该MCP可通过FastMCP安装,并通过环境变量配置。它提供诸如extract_contentscan_linked_content等命令,用于爬取网站和创建内容索引。

这个MCP的用途

该MCP可用于内容提取、网站结构映射、URL批量处理以及创建可搜索的网页内容Markdown存档。

Repository Info
Stars:
2
Forks:
-
Watchers:
2
Last Updated: 1 month ago