chunking-strategy

Этот навык реализует оптимальные стратегии разделения документов для RAG-систем и векторных баз данных, разбивая большие документы на семантически значимые сегменты. Он используется при построении конвейеров извлечения информации или обработке документов для создания эмбеддингов и поиска. Ключевые возможности включают сохранение контекста для эффективного извлечения и предоставление фреймворка для оптимизации обработки документов.

Этот навык активно управляет токенными бюджетами, анализируя сложность задач и формируя стратегии разбиения на части с планами выполнения, чтобы оставаться в установленных лимитах. Он предназначен для использования перед выполнением крупных задач, при приближении к лимитам бюджета или после сбоев из-за исчерпания токенов. Ключевые возможности включают оценку использования, расстановку приоритетов в работе и оптимизацию распределения ресурсов между несколькими агентами.

Этот навык активно управляет токенным бюджетом Claude, анализируя сложность задачи и генерируя стратегии разбиения с планами выполнения, чтобы оставаться в установленных пределах. Он предназначен для разработчиков, которые могут использовать его перед выполнением крупных задач или при приближении к ограничениям бюджета, чтобы предотвратить исчерпание токенов. Инструмент оценивает использование, расставляет приоритеты в работе и создает оптимизированные планы для многоэтапных проектов или координации нескольких агентов.

Docling — это библиотека Python для парсинга PDF, DOCX и других форматов документов с продвинутым пониманием структуры. Она преобразует документы в унифицированное структурированное представление, идеальное для RAG-пайплайнов и AI-воркфлоу. Используйте её, когда вам нужно извлечь чистый текст и данные о разметке из документов для интеграции с LangChain, LlamaIndex или MCP-серверами.