Copilot使用状況メトリックについて
Copilot 使用状況メトリックは、管理者や意思決定者がチームが Copilotをどのように導入しているかを理解するのに役立ちます。 エンゲージメントを追跡し、トレーニングの機会を特定し、AI 支援ワークフローがプル要求のスループットとマージ時間にどのように関連しているかを調べることができます。
ダッシュボードを使用して、企業や組織全体の傾向を調べることができます。
- 利用状況メトリック ダッシュボードには、導入とエンゲージメントの傾向が表示されます。
- コード生成ダッシュボードでは、ユーザーとエージェントによって生成されたコードの内訳が示されます。
- インパクト ダッシュボードは、導入の深さをプル要求の出力に関連付けます。
- リポジトリの分析情報には、組織所有のリポジトリのプル要求アクティビティと Copilot code review 結果が表示されます。 これを使用して、レビュー カバレッジのギャップと、フォローアップが必要なフィードバックを特定します。 アクセス手順については、 リポジトリのインサイトの表示 を参照してください。 メトリックの定義と解釈については、 リポジトリのインサイト指標 を参照してください。
カスタム レポートまたは長期ストレージの場合は、使用状況メトリック API と NDJSON エクスポートを使用します。 API は、リポジトリレベルとユーザーレベルの詳細を含むエンタープライズおよび組織スコープのレポートを提供します。 「Copilot使用状況メトリックの REST API エンドポイント」を参照してください。
データは何を測定しますか?
使用状況メトリックは、導入と開発のワークフローに関するさまざまな質問に答えるのに役立ちます。
| カテゴリ | 測定対象 | 質問例 |
|---|---|---|
| 養子縁組 | ||
| Copilotをアクティブに使用しているライセンスを持つ開発者の数。 | チームは定期的に Copilot を使用していますか? | |
| エンゲージメント | 開発者が Copilot を使用する頻度と、どの機能を使用しているか。 | 開発者はトレーニング後にエージェント ワークフローを探索していますか? |
| 受け入れ率 | 開発者が提案を受け入れる頻度。 受け入れの傾向は、提案が役に立つかどうかを示唆できます。 | 開発者はインライン提案を受け入れる割合がより高くなっていますか? |
| コード行 | エディターで提案された、追加された、または削除されたコード。 | 生成され、ファイルに挿入されているコードの量はどのくらいですか? |
| プルリクエストのライフサイクル | プルリクエストの作成数とマージ数、マージまでの時間、レビュー活動。 | 導入はプルリクエストのスループットとデリバリーフローにどのように関連しますか? |
単一の数値を生産性の尺度として扱うのではなく、これらの信号全体のパターンを探します。 傾向と開発者のフィードバックを組み合わせて、何がうまくいっているか、そしてチームがどこでサポートを必要としているかを理解します。
採用コホートを理解する
アクティブ ユーザー数は、ユーザーが Copilotを使用しているかどうかを示しますが、その使用方法は示しません。 インパクト ダッシュボードの導入コーホートでは、コードの入力候補や編集からエージェント優先ワークフローやマルチエージェント ワークフローまで、ユーザーが利用する機能ごとにユーザーを分類します。 これは、利用の幅が時間の経過とともに広がっているかどうかを確認するのに役立ちます。
コーホートは、単なる活動量ではなく、対象となる機能の使用の幅を記述します。 補完機能を頻繁に使うユーザーはコード優先フェーズにとどまることができる一方で、複数のエージェント サーフェスを使用しているユーザーは後のフェーズの対象となることがあります。
影響ダッシュボードでは、これらのコーホートを使用して、プル リクエストの出力とマージするまでの時間を比較します。 業界比較は、参加しているピアからの追加のコンテキストを提供し、潜在的な投資収益率の見積もりでは、導入フェーズをまたいだコストと出力を比較します。 これらの比較は、導入が生産性の変化を引き起こしたという証拠ではなく、関連付けを示しています。 チームの構成、プロジェクトの複雑さ、経験も結果に影響を与える可能性があります。
カバレッジと制限事項について
使用状況メトリックは、IDE、 Copilot CLI、およびその他のサポートされているサーフェスからのテレメトリを組み合わせたものになります。 これらは、すべての Copilot アクティビティの完全なレコードではありません。 カバレッジは、メトリックとレポートによって異なります。
詳細な IDE の内訳には、テレメトリが有効になっているサポートされているクライアントが必要です。 サーバー側のテレメトリは、クライアント側の詳細がない場合でもアクティブなユーザーを識別できます。
リポジトリの分析情報では、サーバー側のプル要求とレビュー データが使用され、IDE テレメトリには依存しません。
特定の日のデータは、その日が閉じた後、完全な UTC 日の 2 日以内に使用できます。 同じユーザーが複数の組織に属できるため、組織レベルのメトリックが重複する可能性があるため、組織の合計を追加してエンタープライズ合計を計算しないでください。
使用状況メトリックは、ライセンスの割り当てではなく、アクティビティを測定します。 シートとライセンス情報については、Copilot ユーザー管理 API を使用します。
メトリックをより詳細に分析する
結果を説明または検証する必要がある場合は、参照記事を使用してメトリック カバレッジと導入フェーズの定義を確認し、ダッシュボードと API レポートを調整し、業界の比較を解釈します。 「GitHub Copilot の使用状況メトリクス」を参照してください。