md-webcrawl-mcp

Что такое MCP

Это реализация Model Context Protocol (MCP) на Python, предназначенная для работы в качестве веб-краулера. Она извлекает и сохраняет контент веб-сайтов в формате markdown.

Как использовать этот MCP

MCP можно установить через FastMCP и настроить с помощью переменных окружения. Он предоставляет команды, такие как extract_content и scan_linked_content, для сканирования веб-сайтов и создания индексов контента.

Для чего можно использовать этот MCP

Этот MCP полезен для извлечения контента, составления карты структуры веб-сайтов, пакетной обработки URL-адресов и создания доступных для поиска архивов веб-контента в формате markdown.