J
md-webcrawl-mcp
By jmh108·Visit Source
Веб-краулер на Python MCP для извлечения контента с веб-сайтов
18 апреля 2025 г.
Today
0 Clicks
Что такое MCP
Это реализация Model Context Protocol (MCP) на Python, предназначенная для работы в качестве веб-краулера. Она извлекает и сохраняет контент веб-сайтов в формате markdown.
Как использовать этот MCP
MCP можно установить через FastMCP и настроить с помощью переменных окружения. Он предоставляет команды, такие как extract_content и scan_linked_content, для сканирования веб-сайтов и создания индексов контента.
Для чего можно использовать этот MCP
Этот MCP полезен для извлечения контента, составления карты структуры веб-сайтов, пакетной обработки URL-адресов и создания доступных для поиска архивов веб-контента в формате markdown.
Repository Info
Stars:
4
Forks:
5
Watchers:
4
Last Updated: 4 months ago
Sponsored
Vernclaw Plugins for OpenClaw
Ready-to-use connectors for SEO data, social reading & content generation. Pay-as-you-go credits with audit logs.
