После назначения Copilot лицензий на предприятии вы можете использовать панель мониторинга метрик использования Copilot и API, чтобы убедиться в активности лицензий и отслеживать тенденции раннего использования. Это поможет вам оценить, доходит ли ваше внедрение до нужных людей, и быстро принять меры, если внедрение происходит медленнее, чем ожидалось.
Чтобы получить более широкое представление о внедрении, вы можете объединить аналитику панели мониторинга с качественной обратной связью, например с короткими опросами или командными проверками.
Предпосылка
Для доступа к метрикам использования Copilot должна быть включена политика «Copilot метрики использования» :
-
[AUTOTITLE](/copilot/how-tos/administer-copilot/manage-for-enterprise/manage-enterprise-policies#defining-policies-for-your-enterprise) -
[AUTOTITLE](/copilot/how-tos/administer-copilot/manage-for-organization/manage-policies#enabling-copilot-features-and-models-in-your-organization)
Шаг 1: Access к панели управления метрик использования
На панели мониторинга отображаются агрегированные данные телеметрии из интегрированных сред разработки разработчиков и обновляются ежедневно, хотя данные могут отставать от UTC на 3 дня.
Шаг 2: Отслеживание активации лицензии
Используйте диаграммы "Активные пользователи IDE" и "Ежедневные активные пользователи IDE", чтобы убедиться, что разработчики начинают использовать назначенные им лицензии.
| Единица измерения | Что это говорит вам | Как действовать |
|---|---|---|
| Активные пользователи IDE | Сколько лицензированных разработчиков использовали Copilot хотя бы один раз в этом календарном месяце. | Сравните с общим количеством назначенных лицензий. Если это число намного меньше, проверьте конфигурацию интегрированной среды разработки или сообщите о действиях активации своим командам. |
| Ежедневно активные пользователи IDE | Сколько уникальных пользователей используют Copilot каждый день. | Ищите восходящую тенденцию в первые две недели после развертывания. Плоская линия может сигнализировать о том, что пользователям требуется дополнительное включение или руководство по настройке. |
| Еженедельные активные пользователи IDE | Скользящее общее количество активных пользователей за 7 дней. | Используйте это для отслеживания согласованности. Постоянное или увеличивающееся WAU указывает на успешную активацию и повторное использование. |
Примечание.
Метрики использования Copilot отражают активность только в поддерживаемых IDE. Использование в Копилот Чат на GitHub.com, GitHub Mobile, Обзор кода Copilot или Второй пилот CLI не включается в данные панели управления.
Шаг 3: Определите сигналы раннего внедрения
Когда лицензии станут активными, сосредоточьтесь на показателях, указывающих на здоровое раннее внедрение.
| Сигнал | Где его найти в личном кабинете | Что искать |
|---|---|---|
| Стабильный рост DAU | График "Ежедневные активные пользователи IDE" | Стабильный рост ежедневных пользователей в течение первого месяца. |
| Разнообразие функций | График "Запросов в режиме чата" | Разработчики, пробующие несколько режимов чата (Спросить, Редактировать, Планировать, Агент), свидетельствуют о любопытстве и вовлечённости. |
| Первоначальное использование агента | Карточка "Агентское усыновление" | Даже небольшое внедрение агентов (5–10%) на ранней стадии является положительным сигналом для экспериментов. |
Здоровое раннее внедрение обычно выглядит так, как 60–80% назначенных пользователей проявляют активность в течение первого месяца.
Шаг 4: Действуйте в соответствии с сигналами об ограниченном внедрении
Если ваши метрики не принимаются, попробуйте одну из следующих стратегий.
| Симптом | Возможная причина | Что to do |
|---|---|---|
| Низкое общее количество активных пользователей | Пользователи не активировали лицензии или не настроили Copilot в интегрированной среде разработки. | Повторно поделитесь материалами по адаптации или проведите короткую сессию «проверки активации». |
| Равномерное ежедневное использование | Разработчики однажды попытались Copilot, но не возвращаются. | Предоставьте ресурсы поддержки, такие как Copilot подсказки или внутренние истории успеха. |
| Не требует использования агентов | Команды могут не знать о Copilot агент. | Поделитесь примерами продвинутых сценариев использования, чтобы стимулировать исследования. |
Вы также можете использовать Копилот Чат для диагностики проблем. Рассмотрим пример.
What patterns might explain low adoption across some teams in the Copilot metrics export?
What patterns might explain low adoption across some teams in the Copilot metrics export?
What patterns might explain low adoption across some teams in the Copilot metrics export?
Шаг 5: Отслеживайте активацию программным способом
Теперь, когда у вас есть представление о том, какие данные о внедрении вам доступны и что эти данные говорят вам о развертывании, рассмотрите возможность использования API для продолжения мониторинга внедрения с течением времени.
-
**Используйте конечную точку Enterprise Usage** для получения агрегированных данных по всем организациям предприятия. - Фильтруйте экспорт по
dayилиuser_loginдля идентификации новых активированных пользователей. - Сравните
user_initiated_interaction_countиcode_acceptance_activity_countузнайте, активно ли пользователи взаимодействуют после назначения лицензии.
Шаг 6: Экспортируйте данные на уровне пользователя для более глубокого анализа
В некоторых случаях могут потребоваться данные о действиях на уровне пользователя для более глубокого анализа или интеграции с внутренними инструментами бизнес-аналитики. Экспорт наиболее полезен, если вы хотите проанализировать долгосрочные тенденции или соотнести внедрение с другими метриками (например, с производительностью или действиями по внедрению).
-
На панели управления нажмите Экспортируйте JSON в правом верхнем углу.
-
Скачайте файл NDJSON и используйте Копилот Чат для анализа данных. Например, спросите:
Copilot prompt * Summarize which organizations show the largest increase in `loc_added_sum` this month. * Identify users with high `user_initiated_interaction_count` but low `code_acceptance_activity_count`.
* Summarize which organizations show the largest increase in `loc_added_sum` this month. * Identify users with high `user_initiated_interaction_count` but low `code_acceptance_activity_count`.
* Summarize which organizations show the largest increase in `loc_added_sum` this month. * Identify users with high `user_initiated_interaction_count` but low `code_acceptance_activity_count`.
Дополнительные материалы
-
[AUTOTITLE](/copilot/tutorials/roll-out-at-scale/assign-licenses/remind-inactive-users) -
[AUTOTITLE](/copilot/tutorials/roll-out-at-scale/enable-developers/drive-adoption)