MCP HubMCP Hub
SKILL·2582A0

sentencepiece

davila7
更新日 4 months ago
313 閲覧
18,478
1,685
18,478
GitHubで表示
デザインTokenizationSentencePieceLanguage-IndependentBPEUnigramMultilingualCJK LanguagesUnicodeDeterministicGoogle

について

SentencePieceは、BPEまたはユニグラムアルゴリズムを用いて生のUnicodeテキストを処理する言語非依存のトークナイザーです。特にCJK言語を含む多言語モデルに最適で、高速かつ決定論的なトークン化を提供します。言語固有の前処理なしで生テキストから直接トークナイザーを訓練する必要がある場合にご利用ください。

クイックインストール

Claude Code

推奨
メイン
npx skills add davila7/claude-code-templates -a claude-code
プラグインコマンド代替
/plugin add https://github.com/davila7/claude-code-templates
Git クローン代替
git clone https://github.com/davila7/claude-code-templates.git ~/.claude/skills/sentencepiece

このコマンドをClaude Codeにコピー&ペーストしてスキルをインストールします

GitHub リポジトリ

davila7/claude-code-templates
パス: cli-tool/components/skills/ai-research/tokenization-sentencepiece
0
anthropicanthropic-claudeclaudeclaude-code
FAQ

よくある質問

sentencepiece Skillとは何ですか?

sentencepiece はdavila7 が作成した Claude Skillです。Skillは、Claudeが必要に応じて読み込む指示とリソースをまとめ、追加の指示なしで sentencepiece に関連するタスクを実行できるようにします。

sentencepiece をインストールするには?

このページのインストールコマンドを使用してください。sentencepiece をプラグインとして Claude Code に追加するか、リポジトリを skills ディレクトリにクローンし、Claudeを再起動してSkillを読み込みます。

sentencepiece はどのカテゴリに属しますか?

sentencepiece は デザイン カテゴリに属します。

sentencepiece は無料で利用できますか?

はい。sentencepiece は AIMCP に掲載されており、無料でインストールできます。

関連スキル

executing-plans
デザイン

executing-plansスキルは、完全な実装計画があり、それを管理されたバッチでレビューチェックポイントを設けながら実行する場合に使用します。このスキルは計画を読み込んで批判的にレビューした後、小さなバッチ(デフォルトは3タスク)でタスクを実行し、各バッチの間に進捗状況を報告してアーキテクトのレビューを受けます。これにより、品質管理チェックポイントが組み込まれた体系的な実装が保証されます。

スキルを見る
requesting-code-review
デザイン

このスキルは、コードレビュアーサブエージェントを起動し、処理を進める前に要件に対してコード変更を分析します。タスク完了後、主要な機能の実装後、またはmainブランチへのマージ前などに使用すべきです。このレビューは、現在の実装と元の計画を比較することで、問題を早期に発見するのに役立ちます。

スキルを見る
connect-mcp-server
デザイン

このスキルは、開発者がHTTP、stdio、またはSSEトランスポートを使用してMCPサーバーをClaude Codeに接続するための包括的なガイドを提供します。GitHub、Notion、カスタムAPIなどの外部サービスを統合するためのインストール、設定、認証、セキュリティについて解説しています。MCP統合のセットアップ、外部ツールの設定、またはClaudeのModel Context Protocolを扱う際にご利用ください。

スキルを見る
web-cli-teleport
デザイン

このスキルは、タスク分析に基づいて開発者がClaude Code WebとCLIインターフェースの選択を支援し、これらの環境間でのシームレスなセッションテレポーテーションを可能にします。Web、CLI、モバイル環境を切り替える際のセッション状態とコンテキストを管理することで、ワークフローを最適化します。様々な段階で異なるツールを必要とする複雑なプロジェクトにご活用ください。

スキルを見る