Inspection des données de télémétrie avec le tableau de bord Aspire
Le tableau de bord Aspire fait partie de l’offre .NET Aspire . Le tableau de bord permet aux développeurs de surveiller et d’inspecter leurs applications distribuées.
Dans cet exemple, nous allons utiliser le mode autonome et apprendre à exporter des données de télémétrie dans le tableau de bord Aspire, et à inspecter les données là-bas.
Exportateur
Les exportateurs sont responsables de l’envoi de données de télémétrie à une destination. En savoir plus sur les exportateurs ici. Dans cet exemple, nous utilisons l’exportateur OTLP (OpenTelemetry Protocol) pour envoyer des données de télémétrie au tableau de bord Aspire.
Prérequis
- Déploiement d’une conversation Azure OpenAI terminée.
- Docker
- Dernier SDK .Net pour votre système d’exploitation.
- Déploiement d’une conversation Azure OpenAI terminée.
- Docker
- Python 3.10, 3.11 ou 3.12 installé sur votre ordinateur.
Remarque
L’observabilité du noyau sémantique n’est pas encore disponible pour Java.
Programme d’installation
Créer une application console
Dans un terminal, exécutez la commande suivante pour créer une application console en C# :
dotnet new console -n TelemetryAspireDashboardQuickstart
Accédez au répertoire du projet nouvellement créé une fois la commande terminée.
Installer les packages nécessaires
Noyau sémantique
dotnet add package Microsoft.SemanticKernel
OpenTelemetry Console Exporter
dotnet add package OpenTelemetry.Exporter.OpenTelemetryProtocol
Créer une application simple avec le noyau sémantique
Dans le répertoire du projet, ouvrez le Program.cs
fichier avec votre éditeur favori. Nous allons créer une application simple qui utilise le noyau sémantique pour envoyer une invite à un modèle d’achèvement de conversation. Remplacez le contenu existant par le code suivant et renseignez les valeurs requises pour deploymentName
, endpoint
et apiKey
:
using Microsoft.Extensions.DependencyInjection;
using Microsoft.Extensions.Logging;
using Microsoft.SemanticKernel;
using OpenTelemetry;
using OpenTelemetry.Logs;
using OpenTelemetry.Metrics;
using OpenTelemetry.Resources;
using OpenTelemetry.Trace;
namespace TelemetryAspireDashboardQuickstart
{
class Program
{
static async Task Main(string[] args)
{
// Telemetry setup code goes here
IKernelBuilder builder = Kernel.CreateBuilder();
// builder.Services.AddSingleton(loggerFactory);
builder.AddAzureOpenAIChatCompletion(
deploymentName: "your-deployment-name",
endpoint: "your-azure-openai-endpoint",
apiKey: "your-azure-openai-api-key"
);
Kernel kernel = builder.Build();
var answer = await kernel.InvokePromptAsync(
"Why is the sky blue in one sentence?"
);
Console.WriteLine(answer);
}
}
}
Ajouter des données de télémétrie
Si vous exécutez l’application console maintenant, vous devez vous attendre à voir une phrase expliquant pourquoi le ciel est bleu. Pour observer le noyau via la télémétrie, remplacez le // Telemetry setup code goes here
commentaire par le code suivant :
// Endpoint to the Aspire Dashboard
var endpoint = "http://localhost:4317";
var resourceBuilder = ResourceBuilder
.CreateDefault()
.AddService("TelemetryAspireDashboardQuickstart");
// Enable model diagnostics with sensitive data.
AppContext.SetSwitch("Microsoft.SemanticKernel.Experimental.GenAI.EnableOTelDiagnosticsSensitive", true);
using var traceProvider = Sdk.CreateTracerProviderBuilder()
.SetResourceBuilder(resourceBuilder)
.AddSource("Microsoft.SemanticKernel*")
.AddOtlpExporter(options => options.Endpoint = new Uri(endpoint))
.Build();
using var meterProvider = Sdk.CreateMeterProviderBuilder()
.SetResourceBuilder(resourceBuilder)
.AddMeter("Microsoft.SemanticKernel*")
.AddOtlpExporter(options => options.Endpoint = new Uri(endpoint))
.Build();
using var loggerFactory = LoggerFactory.Create(builder =>
{
// Add OpenTelemetry as a logging provider
builder.AddOpenTelemetry(options =>
{
options.SetResourceBuilder(resourceBuilder);
options.AddOtlpExporter(options => options.Endpoint = new Uri(endpoint));
// Format log messages. This is default to false.
options.IncludeFormattedMessage = true;
options.IncludeScopes = true;
});
builder.SetMinimumLevel(LogLevel.Information);
});
Enfin, supprimez les marques de commentaire de la ligne // builder.Services.AddSingleton(loggerFactory);
pour ajouter la fabrique d’enregistreurs d’événements au générateur.
Pour plus d’informations sur le code de configuration de la télémétrie, consultez cet article . La seule différence ici est que nous utilisons AddOtlpExporter
pour exporter des données de télémétrie vers le tableau de bord Aspire.
Créer un environnement virtuel Python
python -m venv telemetry-aspire-dashboard-quickstart
Activez l’environnement virtuel.
telemetry-aspire-dashboard-quickstart\Scripts\activate
Installer les packages nécessaires
pip install semantic-kernel opentelemetry-exporter-otlp-proto-grpc
Créer un script Python simple avec le noyau sémantique
Créez un script Python et ouvrez-le avec votre éditeur favori.
New-Item -Path telemetry_aspire_dashboard_quickstart.py -ItemType file
Nous allons créer un script Python simple qui utilise le noyau sémantique pour envoyer une invite à un modèle d’achèvement de conversation. Remplacez le contenu existant par le code suivant et renseignez les valeurs requises pour deployment_name
, endpoint
et api_key
:
import asyncio
import logging
from opentelemetry._logs import set_logger_provider
from opentelemetry.exporter.otlp.proto.grpc._log_exporter import OTLPLogExporter
from opentelemetry.exporter.otlp.proto.grpc.metric_exporter import OTLPMetricExporter
from opentelemetry.exporter.otlp.proto.grpc.trace_exporter import OTLPSpanExporter
from opentelemetry.metrics import set_meter_provider
from opentelemetry.sdk._logs import LoggerProvider, LoggingHandler
from opentelemetry.sdk._logs.export import BatchLogRecordProcessor
from opentelemetry.sdk.metrics import MeterProvider
from opentelemetry.sdk.metrics.export import PeriodicExportingMetricReader
from opentelemetry.sdk.metrics.view import DropAggregation, View
from opentelemetry.sdk.resources import Resource
from opentelemetry.sdk.trace import TracerProvider
from opentelemetry.sdk.trace.export import BatchSpanProcessor
from opentelemetry.semconv.resource import ResourceAttributes
from opentelemetry.trace import set_tracer_provider
from semantic_kernel import Kernel
from semantic_kernel.connectors.ai.open_ai import AzureChatCompletion
# Telemetry setup code goes here
async def main():
# Create a kernel and add a service
kernel = Kernel()
kernel.add_service(AzureChatCompletion(
api_key="your-azure-openai-api-key",
endpoint="your-azure-openai-endpoint",
deployment_name="your-deployment-name"
))
answer = await kernel.invoke_prompt("Why is the sky blue in one sentence?")
print(answer)
if __name__ == "__main__":
asyncio.run(main())
Ajouter des données de télémétrie
Variables d'environnement
Reportez-vous à cet article pour plus d’informations sur la configuration des variables d’environnement requises pour permettre au noyau d’émettre des étendues pour les connecteurs IA.
Code
Si vous exécutez le script maintenant, vous devez vous attendre à voir une phrase expliquant pourquoi le ciel est bleu. Pour observer le noyau via la télémétrie, remplacez le # Telemetry setup code goes here
commentaire par le code suivant :
# Endpoint to the Aspire Dashboard
endpoint = "http://localhost:4317"
# Create a resource to represent the service/sample
resource = Resource.create({ResourceAttributes.SERVICE_NAME: "telemetry-aspire-dashboard-quickstart"})
def set_up_logging():
exporter = OTLPLogExporter(endpoint=endpoint)
# Create and set a global logger provider for the application.
logger_provider = LoggerProvider(resource=resource)
# Log processors are initialized with an exporter which is responsible
# for sending the telemetry data to a particular backend.
logger_provider.add_log_record_processor(BatchLogRecordProcessor(exporter))
# Sets the global default logger provider
set_logger_provider(logger_provider)
# Create a logging handler to write logging records, in OTLP format, to the exporter.
handler = LoggingHandler()
# Add filters to the handler to only process records from semantic_kernel.
handler.addFilter(logging.Filter("semantic_kernel"))
# Attach the handler to the root logger. `getLogger()` with no arguments returns the root logger.
# Events from all child loggers will be processed by this handler.
logger = logging.getLogger()
logger.addHandler(handler)
logger.setLevel(logging.INFO)
def set_up_tracing():
exporter = OTLPSpanExporter(endpoint=endpoint)
# Initialize a trace provider for the application. This is a factory for creating tracers.
tracer_provider = TracerProvider(resource=resource)
# Span processors are initialized with an exporter which is responsible
# for sending the telemetry data to a particular backend.
tracer_provider.add_span_processor(BatchSpanProcessor(exporter))
# Sets the global default tracer provider
set_tracer_provider(tracer_provider)
def set_up_metrics():
exporter = OTLPMetricExporter(endpoint=endpoint)
# Initialize a metric provider for the application. This is a factory for creating meters.
meter_provider = MeterProvider(
metric_readers=[PeriodicExportingMetricReader(exporter, export_interval_millis=5000)],
resource=resource,
views=[
# Dropping all instrument names except for those starting with "semantic_kernel"
View(instrument_name="*", aggregation=DropAggregation()),
View(instrument_name="semantic_kernel*"),
],
)
# Sets the global default meter provider
set_meter_provider(meter_provider)
# This must be done before any other telemetry calls
set_up_logging()
set_up_tracing()
set_up_metrics()
Pour plus d’informations sur le code de configuration de la télémétrie, consultez cet article . La seule différence ici est que nous utilisons OTLP[Span|Metric|Log]Exporter
pour exporter des données de télémétrie vers le tableau de bord Aspire.
Remarque
L’observabilité du noyau sémantique n’est pas encore disponible pour Java.
Démarrer le tableau de bord Aspire
Suivez les instructions ci-dessous pour démarrer le tableau de bord. Une fois le tableau de bord en cours d’exécution, ouvrez un navigateur et accédez à http://localhost:18888
l’accès au tableau de bord.
Exécuter
Exécutez l’application console avec la commande suivante :
dotnet run
Exécutez le script Python avec la commande suivante :
python telemetry_aspire_dashboard_quickstart.py
Remarque
L’observabilité du noyau sémantique n’est pas encore disponible pour Java.
Inspecter les données de télémétrie
Après avoir exécuté l’application, accédez au tableau de bord pour inspecter les données de télémétrie.
Conseil
Suivez ce guide pour explorer l’interface de tableau de bord Aspire.
Traces
Si c’est la première fois que vous exécutez l’application après avoir démarré le tableau de bord, vous devez voir qu’une trace est l’onglet Traces
. Cliquez sur la trace pour afficher plus de détails.
Dans les détails de la trace, vous pouvez voir l’étendue qui représente la fonction d’invite et l’étendue qui représente le modèle d’achèvement de conversation. Cliquez sur l’étendue de saisie semi-automatique de conversation pour afficher des détails sur la demande et la réponse.
Conseil
Vous pouvez filtrer les attributs des étendues pour trouver celui qui vous intéresse.
Journaux d’activité
Accédez à l’onglet Structured
pour afficher les journaux émis par l’application. Reportez-vous à ce guide pour savoir comment utiliser des journaux structurés dans le tableau de bord.
Étapes suivantes
Maintenant que vous avez correctement généré des données de télémétrie dans le tableau de bord Aspire, vous pouvez explorer d’autres fonctionnalités du noyau sémantique qui peuvent vous aider à surveiller et diagnostiquer votre application :