AI Companion Конференции и чаты

Подход Zoom, заключающийся в объединении моделей ИИ, позволяет достичь наивысшей результативности работы самых популярных функций

Технический директор компании Zoom Сюэдун Хуан (Xuedong Huang) обсуждает наш интегрированный подход к ИИ и его высокопроизводительные возможности составления сводок конференций, резюме и списков дальнейших действий.

8 мин. на чтение

Обновлено: June 17, 2024

Опубликовано: March 26, 2024

Подход Zoom, заключающийся в объединении моделей ИИ, позволяет достичь превосходной результативности работы самых популярных функций AI Companion

В ноябре 2023 года я уже рассказывал о том, как подход Zoom с объединением моделей ИИ позволил достичь качества практически того же уровня, что и у OpenAI GPT-4, пи этом затраты на логический вывод составили всего 6%. Насколько бы впечатляющими ни были эти результаты, теперь мы можем еще больше улучшить качество выводов ИИ по сравнению с GPT-4 от OpenAI для наших самых популярных функций конференций. Благодаря решению Zoom AI Companion относительные ошибки сократились более чем на 20% (в случае с итогами конференций Zoom) и на 60% (в случае выведения следующих шагов) по сравнению с GPT-4 в рамках нашего слепого эталонного тестирования с человеческой проверкой. 

В поддержку наших мероприятий по обучению с целью повышения качества выполняемых задач наш уникальный подход с объединением ИИ позволяет воспользоваться всеми преимуществами многих расширенных БЯМ с закрытым и открытым исходным кодом, которые в комбинации дают лучшие результаты. В этом и заключается отличие от других поставщиков, которые привязаны к конкретным БЯМ. Например, Microsoft Copilot опирается на GPT-4, а Google — на Gemini.

Этот подход к наборам ИИ выделяет Zoom AI Companion на фоне других, обеспечивая клиентам высококачественную работу наших самых популярных функций. Как я уже упоминал в своей последней публикации, мы используем нашу собственную систему оценки Z-scorer, чтобы определять качество результатов, сгенерированных ИИ. Сначала мы используем менее дорогостоящую БЯМ, которая лучше всего подходит для каждой задачи. Затем с помощью Z-scorer определяем качество первоначального выполнения задачи. При необходимости можем использовать другую дополнительную БЯМ, чтобы уточнить задачу. Благодаря такому процессу мы получаем более качественный результат аналогично тому, как люди в команде могут достичь больших результатов вместе, чем по отдельности.

С тех пор мы улучшили нашу систему оценки Z-scorer, внедрив дополнительные сигналы качества от различных БЯМ. Кроме того, чтобы улучшить соответствие предпочтениям человека, мы улучшили объединенное стимулированное обучение. Когда мы объединяем БЯМ Zoom с набором дополнительных БЯМ, популярная функция создания сводки конференции Zoom обеспечивает высококачественные результаты и, согласно нашему недавнему эталонному тестированию, теперь может превзойти модель GPT-4, на базе которой работает Copilot в Microsoft Teams.

Что касается безопасности ИИ, мы также уменьшили предвзятость, присущую большинству БЯМ, сформировав группу из нескольких БЯМ, таких как Claude-3, Gemini и GPT-4, чтобы сократить случаи создания ложной информации и улучшить нашу БЯМ Zoom. Например, разные БЯМ вряд ли сформируют одну и ту же ложную информацию, поэтому мы можем получить более последовательные ответы и сократить случаи получения посторонних значений. 

Подход Zoom, заключающийся в объединении моделей ИИ, нацелен на повышение эффективности наиболее востребованных нашими пользователями возможностей

Недавно мы провели эталонные тесты нашей результативности по двум самым популярным компонентам сводки конференции — итогам конференций и следующим шагам. Более чем полмиллиона клиентов Zoom включили эти функции с момента запуска AI Companion в сентябре 2023 года. 

В рамках нашего последнего внутреннего эталонного теста судьи выбирали самую точную сводку конференции, не зная, какая модель ИИ использовалась для создания каждой из них. Как показано на диаграмме ниже, большая языковая модель (БЯМ) Zoom превзошла GPT-4 на английском языке как по подведению итогов конференций, так и по извлечению следующих шагов в каждом слепом тестировании. Мы можем сократить относительные ошибки при подведении итогов конференций и выведении следующих шагов более чем на 20% и 60% соответственно, что на порядок повысит качество результата.

Рис. 1. Человеческая оценка качества подведения итогов конференций и выведения следующих шагов на английском языке. БЯМ Zoom и Anthropic Claude-3 объединены для получения окончательных результатов, которые значительно превосходят результаты, получаемые при использовании лишь одной модели OpenAI GPT-4.

Рис. 1. Человеческая оценка качества подведения итогов конференций и выведения следующих шагов на английском языке. БЯМ Zoom и Anthropic Claude-3 объединены для получения окончательных результатов, которые значительно превосходят результаты, получаемые при использовании лишь одной модели OpenAI GPT-4.

Мы также оценили качество сводки конференции на японском языке в целом, используя БЯМ Zoom, и сравнили его с качеством GPT-4. Как видно на диаграмме ниже, в данном случае наш объединенный подход позволил достичь лучших результатов. 

Рис. 2. Человеческая оценка сводки конференции на японском языке в целом. БЯМ Zoom и OpenAI GPT-4 объединены для получения окончательных результатов, которые превосходят получаемые при использовании лишь одной модели OpenAI GPT-4.
Рис. 2. Человеческая оценка сводки конференции на японском языке в целом. БЯМ Zoom и OpenAI GPT-4 объединены для получения окончательных результатов, которые превосходят получаемые при использовании лишь одной модели OpenAI GPT-4.

Качественный ИИ включен в Zoom Workplace и бизнес-услуги

Мы стремимся предоставлять преимущества Zoom AI Companion в рамках платформы Zoom нашим клиентам, использующим соответствующие планы Zoom, без доплат*. Такая неустанная концентрация внимания на качестве результатов ИИ повышает ценность Zoom Workplace и бизнес-услуг Zoom. Кроме того, согласно исследованию GigaOm по заказу Zoom (опубликовано 26 марта 2024 г.), функция расшифровки AI Companion работала с 95%-ной точностью, а в случаях с вопросами на конференции решение AI Companion предоставляло результаты в четыре раза быстрее, чем сеть ChatGPT-4.

Благодаря этим последним инновациям вы можете быть уверены в том, что наш ИИ, который является одним из лучших по качеству в отрасли, будет создавать сводки для каждой конференции Zoom. 

* Решение AI Companion может быть недоступно для некоторых регионов или отраслей.

Наши клиенты нас любят

Okta
Nasdaq
Rakuten
Logitech
Western Union
Autodesk
Dropbox
Okta
Nasdaq
Rakuten
Logitech
Western Union
Autodesk
Dropbox

Zoom — единая платформа для совместной работы