omniparser-autogui-mcp

このMCPについて

これはMicrosoftのOmniParserを使用して画面内容を分析し、Windowsシステム上で自動化されたGUI操作を実行するModel Context Protocol（MCP）サーバーです。

使用方法

サブモジュールを含むリポジトリをクローンし、環境変数を設定し、claude_desktop_config.jsonファイルでMCPサーバーを構成してインストールします。ウィンドウターゲティング、バックエンド構成、通信方法など、さまざまな環境変数でサーバーをカスタマイズできます。

用途

このMCPは、OmniParserのOCRとコンピュータービジョン機能で画面内容を分析することにより、画面上のブラウザでの検索やアプリケーションとのインタラクションなどの自動化されたGUI操作を可能にします。直接APIアクセスが利用できない自動化タスクに特に有用です。