Frameworks y plataformas
Phoenix
Rastree solicitudes compatibles con OpenAI de TokenLab con Arize Phoenix
Descripción general
Phoenix puede registrar llamadas desde un cliente de Python de OpenAI cuya URL base apunte a TokenLab.
Instalación
pip install arize-phoenix openinference-instrumentation-openai openaiEntorno
export TOKENLAB_API_KEY="sk-your-tokenlab-key"Registrar Phoenix
Inicie Phoenix localmente o utilice una implementación existente antes de ejecutar este ejemplo. De forma predeterminada, register() envía rastreos al recopilador OTLP/gRPC local en http://localhost:4317. Para otra implementación, configure el endpoint del recopilador y la autenticación utilizando la guía de configuración de Phoenix. La instalación del SDK no inicia el recopilador.
from phoenix.otel import register
tracer_provider = register(
project_name="tokenlab-app",
auto_instrument=True,
)Llamar a TokenLab
import os
from openai import OpenAI
client = OpenAI(
api_key=os.environ["TOKENLAB_API_KEY"],
base_url="https://api.tokenlab.sh/v1",
)
response = client.chat.completions.create(
model="claude-sonnet-5",
messages=[{"role": "user", "content": "Write a short haiku."}],
)
print(response.choices[0].message.content)Notas sobre el endpoint
Phoenix rastrea la ruta de llamada del SDK de OpenAI. Utilice esta página para llamadas a TokenLab de estilo Chat Completions. Otros endpoints nativos de TokenLab aún pueden rastrearse si la instrumentación de su aplicación captura el cliente que utiliza para esas solicitudes.