本文へ移動
cccskills
無料GitHub で公開

phoenix-arize-setup

Arize Phoenix observability platform setup for LLM debugging and evaluation

a5c-ai/babysitter
インストール方法を見る

含まれるファイル（2）

  • SKILL.md1.5 KB
  • README.md502 B

SKILL.md（原文）

インストールする前に、エージェントに与えられる指示の中身を確認できます。

Phoenix Arize Setup Skill

Capabilities

  • Set up Phoenix local server
  • Configure tracing instrumentation
  • Design evaluation experiments
  • Implement embedding visualizations
  • Set up retrieval analysis
  • Create custom evaluations with LLM-as-judge

Target Processes

  • llm-observability-monitoring
  • agent-evaluation-framework

Implementation Details

Core Features

  1. Tracing: OpenTelemetry-based LLM traces
  2. Evals: LLM-as-judge evaluations
  3. Embeddings: Visualization and drift detection
  4. Retrieval: RAG quality analysis
  5. Datasets: Experiment management

Instrumentation

  • OpenAI auto-instrumentation
  • LangChain instrumentation
  • LlamaIndex instrumentation
  • Custom span creation

Configuration Options

  • Phoenix server setup
  • Trace sampling
  • Evaluation metrics
  • Embedding models
  • Export settings

Best Practices

  • Comprehensive instrumentation
  • Regular evaluation runs
  • Monitor embedding drift
  • Analyze retrieval quality

Dependencies

  • arize-phoenix
  • openinference-instrumentation-openai

レビュー

まだレビューはありません。使ってみた感想をお寄せください。

ログインしてレビューを書く

同じリポジトリのスキル

概要と使いどころ

advanced-ds-library

無料

Provide implementations of advanced data structures

日本語の概要は準備中です。原文の説明を表示しています。

a5c-ai/babysitter1,8422026年9月17日 更新

adversarial-review

無料

Fresh adversarial code review with binary PASS/FAIL verdicts, evidence citations, and anchoring bias prevention via fresh reviewer spawning.

日本語の概要は準備中です。原文の説明を表示しています。

a5c-ai/babysitter1,8422026年9月17日 更新

agent-booster

無料

WASM-based instant code transforms for simple tasks, achieving 352x speedup over LLM inference with zero cost.

日本語の概要は準備中です。原文の説明を表示しています。

a5c-ai/babysitter1,8422026年9月17日 更新

agent-coordination

無料

Coordinate Crew (persistent) and Polecat (transient) agents using Gas Town's hook-based work distribution and GUPP principle.

日本語の概要は準備中です。原文の説明を表示しています。

a5c-ai/babysitter1,8422026年9月17日 更新

algorithm-visualizer

無料

Generate visual representations of algorithm execution

日本語の概要は準備中です。原文の説明を表示しています。

a5c-ai/babysitter1,8422026年9月17日 更新

anti-drift

無料

Hierarchical coordination and drift detection with frequent checkpoints, shared memory coherence validation, role specialization enforcement, and short task cycles.

日本語の概要は準備中です。原文の説明を表示しています。

a5c-ai/babysitter1,8422026年9月17日 更新

a5c-ai のスキルをすべて見る

このスキルの問題を報告する