Workspace Analytics в ChatGPT: как оценивать использование командой

Что показывает аналитика

Workspace Analytics предназначена для анализа использования ChatGPT в Enterprise и Edu. Справка описывает показатели активности и агрегированные сведения о типах задач. Это помогает увидеть распространение инструмента внутри организации, но не раскрывает автоматически экономический результат каждой беседы.

Агрегация и ограничения приватности влияют на полноту детализации. Также данные обновляются с задержкой: отчёт не стоит использовать как журнал выполнения отдельной операции в реальном времени.

Как построить полезный отчёт

Начните с вопроса: какую рабочую задачу команда должна выполнять лучше? Для пилота зафиксируйте число пользователей, число завершённых рабочих результатов и время проверки этих результатов. Сопоставьте их с активностью в рабочем пространстве за одинаковый период.

Рост сообщений может означать и успешное освоение инструмента, и необходимость повторять неудачные запросы. Поэтому добавьте небольшую выборку результатов, оценённых по заранее согласованным критериям.

Разделяйте разные расходы

Лицензии рабочего пространства и расход API относятся к разным способам использования. Для собственного приложения ведите отдельный учёт запросов и успешных пользовательских операций. Объединять эти показатели полезно на уровне одного бизнес-процесса, сохраняя различие источников данных. Так стоимость завершённой задачи будет понятнее, чем стоимость сообщения сама по себе.

Первоисточник

Документация или сообщение автора.