Frameworks & Plattformen

Phoenix

Verfolgen Sie OpenAI-kompatible TokenLab-Anfragen mit Arize Phoenix

Überblick

Phoenix kann Aufrufe von einem OpenAI Python-Client aufzeichnen, dessen Base URL auf TokenLab verweist.

Installation

pip install arize-phoenix openinference-instrumentation-openai openai

Umgebung

export TOKENLAB_API_KEY="sk-your-tokenlab-key"

Phoenix registrieren

Starten Sie Phoenix lokal oder verwenden Sie eine bestehende Bereitstellung, bevor Sie dieses Beispiel ausführen. Standardmäßig sendet register() Traces an den lokalen OTLP/gRPC-Collector unter http://localhost:4317. Für eine andere Bereitstellung konfigurieren Sie den Collector-Endpunkt und die Authentifizierung mithilfe des Phoenix-Einrichtungsleitfadens. Die Installation des SDK startet den Collector nicht.

from phoenix.otel import register

tracer_provider = register(
    project_name="tokenlab-app",
    auto_instrument=True,
)

TokenLab aufrufen

import os

from openai import OpenAI

client = OpenAI(
    api_key=os.environ["TOKENLAB_API_KEY"],
    base_url="https://api.tokenlab.sh/v1",
)

response = client.chat.completions.create(
    model="claude-sonnet-5",
    messages=[{"role": "user", "content": "Write a short haiku."}],
)

print(response.choices[0].message.content)

Hinweise zu Endpunkten

Phoenix verfolgt den Aufrufpfad des OpenAI SDK. Verwenden Sie diese Seite für TokenLab-Aufrufe im Stil von Chat Completions. Andere native TokenLab-Endpunkte können weiterhin verfolgt werden, wenn Ihre Anwendungsinstrumentierung den Client erfasst, den Sie für diese Anfragen verwenden.

Auf dieser Seite