Skip to main content

Nutzungs- und Abrechnungsmetriken

In diesem Handbuch wird gezeigt, wie Tokenanzahl, Kontextfensterauslastung, KI-Kreditkosten und Kontokontingent aus einer Copilot SDK-Anwendung gelesen werden. Beispiele für TypeScript, Python, Go, .NET, Java und Rust.

Tipp

Jedes Beispiel ist funktional gleichbedeutend mit sprachenübergreifend. Der TypeScript-Codeausschnitt ist standardmäßig erweitert. Wählen Sie Ihre Sprache aus den reduzierbaren Blöcken aus, um die gleiche Logik in diesem SDK anzuzeigen.

Überblick

Das SDK zeigt Nutzungsdaten über zwei ergänzende Mechanismen an:

  • Sitzungsereignisse: Kurzlebige Ereignisse, die die Laufzeit als Turnruns ausgibt. Abonnieren Sie diese für Echtzeit-, API-Aufrufdaten.
  • RPC-Methoden: Anforderungs-/Antwortaufrufe, die Sie bei Bedarf tätigen. Verwenden Sie diese, um gesammelte Summen zu snapshotn oder das Kontingent auf Kontoebene nachzuschlagen.

Die folgende Tabelle ordnet jedes Signal der API zu, die es verfügbar macht.

SignalAPIGeltungsbereichTyp
Anzahl der Token pro Anruf
assistant.usage-EreignisSessionEvent
Kontextfensterverwendung
session.usage_info-EreignisSessionEvent
Aufschlüsselung von Kontextfenstern (bei Bedarf)session.metadata.contextInfoSessionRPC
Akkumulierte KI-Gutschrift und Tokensummensession.usage.getMetricsSessionRPC
Ki-Kreditpreise pro Modellmodels.listServerRPC
Kontokontingent- und Premiuminteraktionenaccount.getQuotaServerRPC

Hinweis

session.usage.getMetrics, session.metadata.contextInfound session.metadata.recomputeContextTokens sind in der generierten RPC-Oberfläche experimentell markiert. In .NET erhöhen sie die GHCP001 experimentelle Diagnose, die Sie mit #pragma warning disable GHCP001 oder auf Projektebene <NoWarn>GHCP001</NoWarn>unterdrücken. Pin both the SDK and the Copilot CLI runtime if your application depends on them.

In den folgenden Feldtabellen sind nur die Felder aufgeführt, die in den Beispielen auf dieser Seite verwendet werden. Der vollständige, immer aktuelle Feldverweis ist die generierten SDK-Typen plus Ereignisse einer Streaming-Sitzung, die aus dem CLI-Schema für jeden Abhängigkeitsstoß neu generiert wird. Behandeln Sie diese als Quelle der Wahrheit und dieser Seite als aufgabenorientierte Anleitung.

Anzahl der Token pro Anruf

Das assistant.usage Ereignis wird einmal für jeden Modell-API-Aufruf an einer Reihe ausgegeben (einschließlich Aufrufe von Unter-Agents). Es enthält die Tokenanzahl und den Abrechnungsmultiplikator für diesen einzelnen Anruf.

Im folgenden Beispiel werden diese Felder verwendet. Weitere Informationen finden Sie unter Ereignisse einer Streaming-Sitzung für die vollständige Liste, einschließlich Cache-, Reasoning-, Latenz- und Ablaufverfolgungsfeldern.

FeldTypDescription
modelstringModellbezeichner für diesen Aufruf
inputTokensnumberVerbrauchte Eingabetoken
outputTokensnumberErzeugte Ausgabetoken
costnumberPremium-Anforderungsmultiplikator, der auf diesen Aufruf angewendet wurde

Tipp

assistant.usage ist kurzlebig, sodass sie live übermittelt wird, aber nicht wiedergegeben wird, wenn Sie eine Sitzung fortsetzen. Rufen Sie an, session.usage.getMetrics um akkumulierte Summen nach der Tatsache zu lesen (siehe Akkumulierte KI-Gutschrift und Tokensummen).

Codesprachen navigation

TypeScript
import { CopilotClient } from "@github/copilot-sdk";

const client = new CopilotClient();
const session = await client.createSession({ streaming: true });

session.on("assistant.usage", (event) => {
    const { model, inputTokens, outputTokens, cost } = event.data;
    console.log(
        `${model}: in=${inputTokens ?? 0} out=${outputTokens ?? 0} cost=${cost ?? 0}`,
    );
});
session.on("assistant.usage", (event) => {
    const { model, inputTokens, outputTokens, cost } = event.data;
    console.log(
        `${model}: in=${inputTokens ?? 0} out=${outputTokens ?? 0} cost=${cost ?? 0}`,
    );
});

Kontextfensterverwendung

Tokenanzahl teilt Ihnen mit, was jeder Anruf verbraucht hat. Die Kontextfensternutzung teilt Ihnen mit, wie voll das Eingabeaufforderungsfenster des Modells momentan ist – nützlich für die Anzeige einer Statusleiste oder Warnung des Benutzers, bevor die automatische Komprimierung gestartet wird.

Live-Updates mit session.usage_info

Die Laufzeit gibt ein session.usage_info Ereignis aus, wenn sich die Größe des Kontextfensters ändert. Das Beispiel verwendet currentTokens und tokenLimit; siehe Ereignisse einer Streaming-Sitzung für die vollständige Nutzlast.

FeldTypDescription
currentTokensnumberToken zurzeit im Kontextfenster
tokenLimitnumberMaximale Token für das Kontextfenster des Modells

Codesprachen navigation

TypeScript
import { CopilotClient } from "@github/copilot-sdk";

const client = new CopilotClient();
const session = await client.createSession({ streaming: true });

session.on("session.usage_info", (event) => {
    const { currentTokens, tokenLimit } = event.data;
    const pct = Math.round((currentTokens / tokenLimit) * 100);
    console.log(`Context: ${currentTokens}/${tokenLimit} (${pct}%)`);
});
session.on("session.usage_info", (event) => {
    const { currentTokens, tokenLimit } = event.data;
    const pct = Math.round((currentTokens / tokenLimit) * 100);
    console.log(`Context: ${currentTokens}/${tokenLimit} (${pct}%)`);
});

On-Demand-Aufschlüsselung mit session.metadata.contextInfo

Ereignisse werden nur ausgelöst, wenn sich der Kontext ändert. Um die aktuelle Aufschlüsselung jederzeit zu lesen , z. B. direkt nach dem Fortsetzen einer Sitzung – rufen Sie session.metadata.contextInfoauf. Übergeben Sie die Übergabe, promptTokenLimit um den Laufzeitstandard zu verwenden. Übergeben outputTokenLimit``0 Sie 0 den Wert, wenn der Wert unbekannt ist.

Das Ergebnis contextInfo ist null so lange, bis die Sitzung initialisiert wurde (die Systemaufforderung und die Toolmetadaten wurden zwischengespeichert). Es bricht die Summe in systemTokens, , und toolDefinitionsTokens, neben den promptTokenLimit``conversationTokens.

Codesprachen navigation

TypeScript
import { CopilotClient } from "@github/copilot-sdk";

const client = new CopilotClient();
const session = await client.createSession({});

const { contextInfo } = await session.rpc.metadata.contextInfo({
    promptTokenLimit: 0,
    outputTokenLimit: 0,
});

if (contextInfo) {
    console.log(
        `Total ${contextInfo.totalTokens}/${contextInfo.promptTokenLimit} ` +
            `(system=${contextInfo.systemTokens}, conversation=${contextInfo.conversationTokens})`,
    );
}
const { contextInfo } = await session.rpc.metadata.contextInfo({
    promptTokenLimit: 0,
    outputTokenLimit: 0,
});

if (contextInfo) {
    console.log(
        `Total ${contextInfo.totalTokens}/${contextInfo.promptTokenLimit} ` +
            `(system=${contextInfo.systemTokens}, conversation=${contextInfo.conversationTokens})`,
    );
}

Akkumulierte KI-Gutschrift und Tokensummen

session.usage.getMetrics gibt die laufenden Summen für die gesamte Sitzung in einem einzelnen Aufruf zurück. Dies ist die sauberste Möglichkeit, KI-Kreditkosten zu lesen, da sie jeden API-Aufruf (Haupt-Agent und Sub-Agents) für Sie aggregiert.

Im Beispiel werden die folgenden Felder verwendet. Der generierte UsageGetMetricsResult Typ ist der vollständige Verweis.

FeldTypDescription
totalNanoAiunumberSitzungsweite KI-Kreditkosten in Nano-AI-Einheiten
totalPremiumRequestCostnumberPremium-Anforderungskosten für alle Modelle, nach Multiplikatoren
modelMetricsRecord<string, ModelMetric>Modellbasierte Aufschlüsselung; jeder Eintrag hat usage.inputTokens, usage.outputTokensund totalNanoAiu

Hinweis

Die Kosten werden in Nano-AI-Einheiten gemeldet (das Feld ist benannt totalNanoAiu). Die genaue Konvertierung in KI-Gutschriften und die genaue Bedeutung der Premium-Anforderungsabrechnung werden durch GitHub Copilot Abrechnung definiert, nicht durch das SDK– behandeln Sie GitHub Copilot Abrechnungsdokumentation als Wahrheitsquelle und überprüfen Sie vor dem Auftauchen währungsähnlicher Werte für Benutzer. Die Beispiele dividieren sich durch 1e9 eine Einfachheit nach dem SI-Präfix nano ; bestätigen Sie, dass dies der aktuellen Abrechnung entspricht, bevor Sie darauf vertrauen. Die modelMetrics Zuordnungen werden tokenDetails von Laufzeitzeichenfolgen (Modell-IDs und Tokentypnamen) schlüsselt, die vom SDK-Typsystem nicht überprüft werden.

Codesprachen navigation

TypeScript
import { CopilotClient } from "@github/copilot-sdk";

const client = new CopilotClient();
const session = await client.createSession({});

const metrics = await session.rpc.usage.getMetrics();

const aiCredits = (metrics.totalNanoAiu ?? 0) / 1e9;
console.log(`AI credits used: ${aiCredits.toFixed(6)}`);
console.log(`Premium requests: ${metrics.totalPremiumRequestCost}`);

for (const [model, m] of Object.entries(metrics.modelMetrics)) {
    if (!m) continue;
    console.log(
        `${model}: in=${m.usage.inputTokens} out=${m.usage.outputTokens} ` +
            `nanoAiu=${m.totalNanoAiu ?? 0}`,
    );
}
const metrics = await session.rpc.usage.getMetrics();

const aiCredits = (metrics.totalNanoAiu ?? 0) / 1e9;
console.log(`AI credits used: ${aiCredits.toFixed(6)}`);
console.log(`Premium requests: ${metrics.totalPremiumRequestCost}`);

for (const [model, m] of Object.entries(metrics.modelMetrics)) {
    if (!m) continue;
    console.log(
        `${model}: in=${m.usage.inputTokens} out=${m.usage.outputTokens} ` +
            `nanoAiu=${m.totalNanoAiu ?? 0}`,
    );
}

Ki-Kreditpreise pro Modell

Um die Kosten zu schätzen, bevor Sie eine Drehung ausführen, lesen Sie die Tokenpreise jedes Modells von models.list. Dies ist ein serverbezogener Aufruf auf dem Client, sodass keine Sitzung erforderlich ist. Die Preise werden in KI-Gutschriften pro Abrechnungsbatch von Token ausgedrückt. Der generierte Typ listet ModelBillingTokenPrices jedes Feld auf, einschließlich cachePrice.

FeldTypDescription
billing.multipliernumberKostenmultiplikator für Premium-Anforderungen relativ zum Basissatz
billing.tokenPrices.inputPricenumberKI-Kreditkosten pro Batch von Eingabetoken
billing.tokenPrices.outputPricenumberKI-Kreditkosten pro Batch von Ausgabetoken
billing.tokenPrices.batchSizenumberAnzahl der Token pro Abrechnungsbatch

Hinweis

Preiswerte ändern sich, wenn Pläne und Modelle weiterentwickelt werden. Lesen Sie sie zur Laufzeit wie unten dargestellt; Codieren Sie die Zahlen niemals hart in Ihre Anwendung.

Codesprachen navigation

TypeScript
import { CopilotClient } from "@github/copilot-sdk";

const client = new CopilotClient();

const { models } = await client.rpc.models.list({});

for (const model of models) {
    const prices = model.billing?.tokenPrices;
    if (!prices) continue;
    console.log(
        `${model.id}: input=${prices.inputPrice} output=${prices.outputPrice} ` +
            `per ${prices.batchSize} tokens (x${model.billing?.multiplier ?? 1})`,
    );
}
const { models } = await client.rpc.models.list({});

for (const model of models) {
    const prices = model.billing?.tokenPrices;
    if (!prices) continue;
    console.log(
        `${model.id}: input=${prices.inputPrice} output=${prices.outputPrice} ` +
            `per ${prices.batchSize} tokens (x${model.billing?.multiplier ?? 1})`,
    );
}

Kontokontingent- und Premiuminteraktionen

account.getQuotameldet die verbleibende Copilot Berechtigung des authentifizierten Benutzers. Die Zuordnung des Ergebnisses wird anhand des Kontingenttyps quotaSnapshots ( häufig premium_interactions, chat, und completions. Verwenden Sie es, um Benutzern zu zeigen, wie viel ihrer monatlichen Vergütung übrig bleibt, oder um zu toren, bevor sie einen Grenzwert erreichen.

Im Beispiel werden die folgenden Felder verwendet; Der generierte AccountQuotaSnapshot Typ ist der vollständige Verweis. Bei quotaSnapshots den Schlüsseln handelt es sich um Laufzeitzeichenfolgen, die vom SDK-Typsystem nicht überprüft werden, sodass Sie Ihre Nachschlagevorgänge schützen.

FeldTypDescription
entitlementRequestsnumberAnforderungen, die in der Berechtigung enthalten sind, oder -1 für unbegrenzt
usedRequestsnumberAnforderungen, die bisher in diesem Zeitraum verwendet wurden
remainingPercentagenumberProzentsatz der verbleibenden Berechtigung
resetDatestringISO 8601-Datum, an dem das Kontingent zurückgesetzt wird

Tipp

Um das Kontingent für einen bestimmten Benutzer anstelle des globalen Authentifizierungskontexts der Verbindung (z. B. in einem multimandantenbasierten Back-End) zu lesen, übergeben Sie das GitHub-Token dieses Benutzers an getQuota. Siehe Mandantenfähigkeit und Serverbereitstellungen.

Codesprachen navigation

TypeScript
import { CopilotClient } from "@github/copilot-sdk";

const client = new CopilotClient();

const { quotaSnapshots } = await client.rpc.account.getQuota({});
const premium = quotaSnapshots["premium_interactions"];

if (premium) {
    console.log(
        `Premium interactions: ${premium.usedRequests}/${premium.entitlementRequests} ` +
            `(${premium.remainingPercentage.toFixed(1)}% left, resets ${premium.resetDate ?? "n/a"})`,
    );
}
const { quotaSnapshots } = await client.rpc.account.getQuota({});
const premium = quotaSnapshots["premium_interactions"];

if (premium) {
    console.log(
        `Premium interactions: ${premium.usedRequests}/${premium.entitlementRequests} ` +
            `(${premium.remainingPercentage.toFixed(1)}% left, resets ${premium.resetDate ?? "n/a"})`,
    );
}

Auswählen der richtigen API

Verwenden Sie diese Zusammenfassung, um zu entscheiden, welche API zu Ihrem Anwendungsfall passt:

  • Rendern einer Live-Kosten- oder Tokenanzeige als Turn-Ausführung: abonnieren assistant.usage und session.usage_info.
  • Anzeigen einer endgültigen Kostenzusammenfassung nach einer Turn- oder Sitzung: Anruf session.usage.getMetrics.
  • Anzeigen der Kontextfensterverwendung beim Fortsetzen, bevor ein neuer Aufrufsession.metadata.contextInfo ausgeführt wird.
  • Schätzen Sie die Kosten vor der Ausführung der Arbeit: Lesen von models.list Tokenpreisen.
  • Warnen Sie Benutzer, bevor sie ihren Plan erschöpfen: Anruf account.getQuota.

Weiterführende Lektüre