01 Что произошло

Microsoft представила Industry Evaluation Data Generation Platform – систему синтетических сред для тестирования Copilot в масштабе предприятия без использования реальных данных клиентов. Эта платформа позволяет сократить создание оценочных наборов с нескольких дней до автоматического запуска.

02 Ключевые детали

  • Microsoft построила Industry Evaluation Data Generation Platform, использующую полностью синтетические корпоративные среды на основе публичных данных (O*NET, вакансии, отчёты SEC) – без использования данных клиентов.
  • Платформа основана на трёх компонентах: синтетические среды, автоматическая генерация запросов и структурированные фреймворки качества для реалистичной оценки.
  • Автоматизация сократила создание оценочных наборов с нескольких дней до автоматизированных прогонов; Microsoft оценивает экономию в $100 000 на набор и $300 000 в целом.
  • Созданы три отраслевые среды (фармацевтика, финансовые рынки, ИТ); композитный показатель качества вырос на 39%, в некоторых средах превысив 0,9 из 1,0.

03 Почему это важно

Оценка корпоративного ИИ традиционно сталкивается с проблемами конфиденциальности и ручного труда; подход Microsoft обеспечивает воспроизводимое тестирование с сохранением приватности в масштабе, с экономией около $300,000.

04 Кому полезно

Разработчики голосовых интерфейсов, разработчики сервисных приложений, специалисты по информационной безопасности, разработчики AI-продуктов и операционные директора.

Первоисточник
Microsoft Research