Zurück zu Fähigkeiten

phoenix-evals

Arize-ai
Aktualisiert 3 days ago
3 Ansichten
8,866
760
8,866
Auf GitHub ansehen
Metaaidesign

Über

phoenix-evals ermöglicht es Entwicklern, mit einem code-first Ansatz und ergänzendem Einsatz von LLMs für nuancierte Beurteilungen, Evaluatoren für KI/LLM-Anwendungen zu erstellen und auszuführen. Es bietet vorgefertigte Evaluatoren, Werkzeuge zur Erstellung benutzerdefinierter Code- oder LLM-basierter Evaluatoren sowie Hilfsmittel für Batch-Evaluierung und das Durchführen von Experimenten. Nutzen Sie diese Fähigkeit, um Ihre LLM-Ausgaben systematisch anhand von menschlich gelabelten Daten oder synthetischen Datensätzen zu validieren.

Schnellinstallation

Claude Code

Empfohlen
Primär
npx skills add Arize-ai/phoenix -a claude-code
Plugin-BefehlAlternativ
/plugin add https://github.com/Arize-ai/phoenix
Git CloneAlternativ
git clone https://github.com/Arize-ai/phoenix.git ~/.claude/skills/phoenix-evals

Kopieren Sie diesen Befehl und fügen Sie ihn in Claude Code ein, um diese Fähigkeit zu installieren

GitHub Repository

Arize-ai/phoenix
Pfad: skills/phoenix-evals
0
agentsai-monitoringai-observabilityaiengineeringanthropicdatasets

Verwandte Skills

content-collections

Meta

Diese Skill bietet eine produktionsgetestete Einrichtung für Content Collections – ein TypeScript-first-Tool, das Markdown/MDX-Dateien in typsichere Datensammlungen mit Zod-Validierung umwandelt. Verwenden Sie ihn beim Erstellen von Blogs, Dokumentationsseiten oder inhaltsstarken Vite + React-Anwendungen, um Typsicherheit und automatische Inhaltsvalidierung zu gewährleisten. Er behandelt alles von der Vite-Plugin-Konfiguration und MDX-Kompilierung bis hin zur Deployment-Optimierung und Schema-Validierung.

Skill ansehen

polymarket

Meta

Diese Fähigkeit ermöglicht es Entwicklern, Anwendungen mit der Polymarket-Prognosemärkte-Plattform zu erstellen, einschließlich API-Integration für Handel und Marktdaten. Sie bietet außerdem Echtzeit-Datenstreaming über WebSocket, um Live-Trades und Marktaktivitäten zu überwachen. Nutzen Sie sie zur Implementierung von Handelsstrategien oder zur Erstellung von Tools, die Live-Marktaktualisierungen verarbeiten.

Skill ansehen

creating-opencode-plugins

Meta

Diese Fähigkeit unterstützt Entwickler dabei, OpenCode-Plugins zu erstellen, die in über 25 Ereignistypen wie Befehle, Dateien und LSP-Operationen eingreifen. Sie bietet die Plugin-Struktur, Event-API-Spezifikationen und Implementierungsmuster für JavaScript/TypeScript-Module. Nutzen Sie sie, wenn Sie den Lebenszyklus des OpenCode KI-Assistenten mit benutzerdefinierter ereignisgesteuerter Logik abfangen, überwachen oder erweitern müssen.

Skill ansehen

sglang

Meta

SGLang ist ein hochperformantes LLM-Serving-Framework, das sich auf schnelle, strukturierte Generierung für JSON, Regex und agentenbasierte Workflows unter Verwendung seines RadixAttention-Prefix-Cachings spezialisiert. Es bietet deutlich schnellere Inferenz, insbesondere für Aufgaben mit wiederholten Präfixen, was es ideal für komplexe, strukturierte Ausgaben und Mehrfachdialoge macht. Wählen Sie SGLang gegenüber Alternativen wie vLLM, wenn Sie constrained decoding benötigen oder Anwendungen mit umfangreicher Präfix-Weitergabe entwickeln.

Skill ansehen