После просмотра Copilot панели метрик использования вы сможете использовать эту статью для интерпретации каждой диаграммы и выявления возможностей для повышения внедрения и вовлечённости.
Обзор общих тенденций использования
Используйте основные графики использования в панели управления, чтобы понять общие модели внедрения и вовлечённости. Эти диаграммы помогают определить, где использование растет, выравнивается или снижается, чтобы вы могли принять меры для поддержания вовлеченности.
| Единица измерения | Что это показывает | Как это интерпретировать |
|---|---|---|
| Ежедневные активные пользователи (DAU) в среде IDE | Уникальные пользователи, которые взаимодействовали Copilot каждый день. | Устойчивый рост DAU свидетельствует о постоянном взаимодействии; Резкие снижения могут указывать на проблемы с конфигурацией или снижение интереса. |
| Еженедельные активные пользователи среды IDE (WAU) | Уникальные пользователи, активные в течение 7-дневного скользящего окна. | Хорошее соотношение WAU к лицензиям (>60%) указывает на активное текущее использование. |
| Процент принятых доработок кода | Процент принятых предложений. | Растущий показатель предполагает повышение доверия и полезности; Отказ может указывать на несовпадающие предложения или трения в рабочем процессе. |
Проверка внедрения функций
Диаграммы «Requests per chat mode» и «Agent adoption» показывают, как разработчики используют Копилот Чат и агент Copilot.
| Сигнал | Что это говорит вам | Что искать |
|---|---|---|
| Количество запросов в каждом режиме чата | Разбивка взаимодействий в чате по режимам — Спросить, Отредактировать, Планировать или Агент. | Сбалансированное распределение предполагает, что пользователи изучают множество возможностей. Интенсивное использование одного режима может показать, на чем следует сосредоточить включение. |
| Внедрение агентов | Процент активных пользователей, использовавших агент Copilot. | Рост со временем показывает, что разработчики переходят от базовых завершений к более продвинутым Copilot функциям. |
Проверка внедрения модели
Графики «Использование моделей в день» и «Использование модели в режиме чата» помогают понять, какие модели ИИ используются чаще всего.
| Диаграмма | Description | Выводы для получения |
|---|---|---|
| Использование модели в день | Показывает, какой ИИ моделирует активность силы Копилот Чат . | Определите, работают ли пользователи в основном с моделями по умолчанию или экспериментируют с более новыми. |
| Моделирование использования в каждом режиме чата | Разбивает использование модели по режимам чата (Спросить, Редактировать, Планировать, Агент). | Отслеживайте развитие внедрения моделей по мере выпуска новых моделей. |
Примечание.
Диаграммы использования модели в настоящее время представляют только активность в чате. Данные о завершении не включаются в разбивку модели.
Проверка использования языка
Диаграммы «Использование языка» и «Использование языка в день» показывают, какие языки программирования разработчики чаще всего используют с Copilot.
| Диаграмма | Description | Как использовать эту возможность |
|---|---|---|
| Использование языка | Показывает долю Копилот Чат активности языка программирования. | Определите, где Копилот Чат приносит наибольшую ценность и где дополнительная поддержка или поддержка могут помочь. |
| Использование языка в день | Отслеживает ежедневные колебания языковой активности. | Выявляйте сдвиги в фокусе разработки или подтверждайте, способствуют ли новые команды или проекты повышению активности. |
Обзор кохортов внедрения
Распространение когорты внедрения панели мониторинга влияния показывает общий доступ пользователей на каждом этапе, а также способ изменения распределения с течением времени. Сведения о том, что означает каждый этап и как работает классификация, см. в разделе GitHub Copilot метрики использования.
| Сигнал | Что это подразумевает | Предлагаемое действие |
|---|---|---|
| Сокращение доли 1 этапа, рост 2 или 3-го общего ресурса | Пользователи переходят от завершения кода к рабочим процессам, управляемым агентом. | Продолжить текущее включение; рассмотрите возможность совместного использования внутренних историй успеха для поддержания импульса. |
| Общий ресурс крупных или растущих пассивных пользователей | Многие лицензированные пользователи еще не достигли порогового значения участия на этапе. | Проверка назначения лицензий и установки интегрированной среды разработки; предложение подключения для повторного привлечения неактивных пользователей. Кроме того, проверьте, полагаются ли затронутые пользователи в первую очередь на поверхность, которая не является частью критериев классификации этапа, например Копилот Чат на GitHub.com. |
| Остановленная прогрессия с этапа 1 до этапа 2 | Пользователи комфортно с завершениями и чатами, но не использовали поверхности агента. | Следуйте карточке рекомендаций, например настройке Copilot облачный агентили запуску демонстрации рабочих процессов агента. |
| Остановленная прогрессия с этапа 2 до этапа 3 | Пользователи приняли одну поверхность агента, но не слоились в дополнительных поверхностях агента. | Следуйте карточке рекомендаций, например включение Обзор кода Copilot, чтобы ввести вторую область агента. |
| Этап пользователя изменяется с одного дня на следующий, не изменяя их привычки | Назначение этапа пересчитывается ежедневно из 28-дневного окна, поэтому этап пользователя сдвигается по мере того, как старые дни развертываются из окна. | Это ожидаемое поведение, а не ошибка данных; никаких действий не требуется. |
Когда на панели мониторинга отображается карточка рекомендаций, например настройка Copilot облачный агент, включение Обзор кода Copilotили отправка наружу, следуйте связанным инструкциям, чтобы завершить настройку. Каждая рекомендация создается из текущего дистрибутива когорт вашей организации и нацелена на то, чтобы наиболее вероятно, переходить пользователей к более глубокому внедрению.
Просмотр умножения внедрения
Умножение внедрения сравнивает заинтересованных пользователей (этап 1, 2 или 3) с пассивными пользователями по коду, отправленным (запросы на вытягивание, объединенные на пользователя в месяц) и время слияния запросов на вытягивание. Это показывает относительное влияние более глубокого внедрения, независимо от того, сколько пользователей попадает на каждый этап.
| Сигнал | Что это подразумевает | Предлагаемое действие |
|---|---|---|
| Задействованные пользователи объединяют больше запросов на вытягивание на пользователя в месяц, чем пассивные пользователи | Более глубокое Copilot внедрение связано с более высокими отдельными выходными данными. | Используйте это сравнение для поддержки ситуации для продолжения инвестиций в включение. |
| Задействованные пользователи объединяют меньше запросов на вытягивание на каждого пользователя в месяц, чем пассивные пользователи | Заинтересованные пользователи могут тратить больше времени на большую или более сложную работу, или сравнение может отражать различия в состав команды, а не глубину внедрения. | Перекрестная ссылка с распространением когорты внедрения и данными уровня команды перед выводом; избегайте обработки умножения как автономной меры производительности. |
| Задействованные пользователи объединяют запросы на вытягивание быстрее, чем пассивные пользователи | Более глубокое внедрение связано с более коротким жизненным циклом запроса на вытягивание. | Используйте это сравнение вместе с метриками жизненного цикла запроса на вытягивание, чтобы оценить общее влияние доставки. |
| Умножение остается неструктурированным, несмотря на рост на этапе 2 или 3 общей доли | Внедрение агента еще не превратилось в измеримую разницу в выходных данных между задействованными и пассивными пользователями. | Проверьте, концентрируется ли использование агента в нескольких пользователях или командах, и достаточно ли времени прошло с момента развертывания, чтобы показать влияние. |
Примечание.
Умножение внедрения сравнивает два разных населения пользователей, а не одни и те же пользователи с течением времени. Различия в составе команды, сложности проекта или старшинстве между заинтересованными и пассивными пользователями могут влиять на сравнение столько, сколько Copilot само внедрение.
Действия на основе ваших идей
Используйте тенденции использования, внедрения функций и языковой активности для управления внедрением и планированием развертывания.
| Наблюдение | Возможная причина | Предлагаемое действие |
|---|---|---|
| Высокий уровень внедрения в некоторых командах, но низкий уровень в других | Некоторые команды могли неправильно Копилот Чат включить или настроить её. | Проверка назначения лицензий и настройки IDE; Предлагайте адаптацию на уровне команды. |
| Стабильное использование, но низкий уровень внедрения агентов | Разработчики могут не знать о агент Copilot новых функциях. | Делитесь внутренними демонстрациями или историями успеха. |
| Снижение DAU или коэффициента принятия | Проблемы с конфигурацией или снижение актуальности предложений. | Поощряйте обратную связь и проверяйте версии интегрированной среды разработки и расширений. |
Совет
Рассмотрите возможность сочетания тенденций дашборда с отзывами из опросов или ретроспектив, чтобы получить полную картину Copilotвлияния на продуктивность разработчиков.
Дальнейшие шаги
- Сведения о программном доступе к метрикам, включая корпоративные, организации, репозитории и записи на уровне пользователей, см. в разделе Конечные точки REST API для метрик использования Copilot.
- Чтобы построить метрики на уровне команды на основе отчёта по метрикам использования пользователя, см. Показатели использования Copilot на уровне команд.