AI Companion Reunión y chat

El enfoque de IA federada de Zoom ofrece resultados de calidad superior para nuestras características más populares

Xuedong Huang, director de Tecnología de Zoom, habla de nuestro enfoque federado de la IA y de cómo ofrece un rendimiento de alta calidad para resúmenes de reuniones, informes y próximos pasos.

8 min de lectura

Actualizado el May 06, 2024

Publicado el March 26, 2024

El enfoque de IA federada de Zoom ofrece resultados de calidad superior para las características más populares de AI Companion

En noviembre de 2023, expliqué cómo el enfoque de IA federada de Zoom alcanzaba una calidad casi igual a la GPT-4 de OpenAI con solo un 6 % del coste de inferencia. A pesar de lo impresionantes que fueron esos resultados, ahora podemos ofrecer una calidad de IA aún mejor en comparación con la GPT-4 de OpenAI para nuestras características de reuniones más populares. Zoom AI Companion redujo los errores relativos en más de un 20 % (para los «resúmenes» de reuniones de Zoom) y un 60 % (para los «siguientes pasos») en comparación con GPT-4 en nuestra evaluación comparativa interna a ciegas con validación humana. 

Para respaldar nuestros esfuerzos de formación y perfeccionar la calidad de la realización de tareas, nuestro excepcional enfoque federado de la IA aprovecha la colaboración de muchos grandes modelos lingüísticos (LLM) tanto de código cerrado como de código abierto, para lograr mejores resultados. Esto contrasta con otros proveedores que están vinculados a LLM específicos. Por ejemplo, Microsoft Copilot se basó en GPT-4 y Google, en Gemini.

Este enfoque de la IA es lo que distingue a Zoom AI Companion, que ofrece a nuestros clientes una experiencia de alta calidad con nuestras características más populares. Como expliqué en mi última actualización, utilizamos nuestro propio sistema de puntuación Z para juzgar la calidad de los resultados generados por la IA. En primer lugar, empleamos el LLM de menor coste que resulte más adecuado para cada tarea. A continuación, nuestro sistema de puntuación Z evalúa la calidad de la finalización de la tarea inicial. Si es necesario, podemos utilizar otro LLM complementario para optimizar la tarea. Este proceso genera un resultado de mayor calidad, del mismo modo que un equipo de personas puede obtener más logros en conjunto que de manera individual.

Desde entonces, hemos mejorado nuestro sistema de puntuación Z incorporando indicadores de calidad adicionales procedentes de diversos LLM. Además, para adaptarnos mejor a las preferencias humanas, hemos mejorado el aprendizaje federado de refuerzo. Al federar el LLM de Zoom junto con una serie de LLM complementarios, el popular resumen de reuniones de Zoom ofrece resultados de alta calidad y, según nuestra reciente evaluación comparativa, ahora puede superar a GPT-4, que se utiliza para impulsar Copilot en Microsoft Teams.

Respecto de la seguridad de la IA, también redujimos el sesgo inherente a la mayoría de los LLM mediante la formación de un comité compuesto por múltiples LLM como Claude-3, Gemini y GPT-4 para reducir las alucinaciones y mejorar nuestro LLM de Zoom. Por ejemplo, es poco probable que diferentes LLM cometan el mismo error de alucinación, por lo que podemos extraer respuestas más coherentes y reducir el impacto de los datos atípicos. 

El enfoque de IA federada de Zoom es más eficaz cuando los usuarios más lo necesitan

Hace poco realizamos una evaluación comparativa de nuestros resultados para los dos componentes más populares de Resumen de la reunión: los resúmenes de reuniones y los siguientes pasos. Más de medio millón de clientes de Zoom han habilitado estas características desde que lanzamos AI Companion en septiembre de 2023. 

En nuestra última evaluación comparativa interna, hicimos que jueces humanos eligieran el resumen de reunión más preciso sin revelar qué modelo de IA se había utilizado para generar cada resumen. Como se muestra en el gráfico que aparece a continuación, el LLM de Zoom superó a GPT-4 en inglés tanto en los resúmenes de reuniones como en la extracción de los siguientes pasos en cada prueba a ciegas. Podemos reducir los errores relativos de los resúmenes de reuniones y la extracción de los siguientes pasos en más de un 20 % y un 60 %, respectivamente, lo que se traduce de manera directa en ventajas de calidad superiores.

Figura 1. Evaluación humana del resumen de la reunión y los siguientes pasos en inglés. El LLM de Zoom y Claude-3 de Anthropic se federan para obtener resultados finales que superan con creces al GPT-4 de OpenAI solo.

Figura 1. Evaluación humana del resumen de la reunión y los siguientes pasos en inglés. El LLM de Zoom y Claude-3 de Anthropic se federan para obtener resultados finales que superan con creces al GPT-4 de OpenAI solo.

También medimos la calidad del resumen general de la reunión en japonés, utilizando Zoom LLM en comparación con GPT-4. Como se puede ver en el gráfico a continuación, nuestro enfoque federado logró ofrecer mejores resultados en este caso. 

Figura 2. Evaluación humana del resumen general de la reunión en japonés.  El LLM de Zoom y GPT-4 de OpenAI están federados para obtener resultados finales que superan a los de OpenAI GPT-4 cuando se utiliza solo.
Figura 2. Evaluación humana del resumen general de la reunión en japonés. El LLM de Zoom y GPT-4 de OpenAI están federados para obtener resultados finales que superan a los de OpenAI GPT-4 cuando se utiliza solo.

La IA de calidad está integrada en Zoom Workplace y Servicios comerciales

Nos comprometemos a ofrecer a nuestros clientes los beneficios de Zoom AI Companion en toda la plataforma Zoom sin coste adicional en los planes de pago de Zoom elegibles.* Este implacable enfoque en la calidad de la IA genera un mayor valor para el cliente en Zoom Workplace y Servicios Comerciales de Zoom. Además, según un estudio de GigaOm que Zoom encargó (publicado el 26 de marzo de 2024), la transcripción de AI Companion se realizó con un 95 % de precisión, y para situaciones de preguntas durante las reuniones, AI Companion ofreció resultados cuatro veces más rápidos que la web ChatGPT-4.

Con estas recientes innovaciones, puede tener la certeza de que todas las reuniones de Zoom pueden ir acompañadas de un resumen de la reunión generado por IA con la calidad de IA más alta del sector. 

*Es posible que AI Companion no esté disponible para todas las regiones o sectores de la industria.

Nuestros clientes nos prefieren

Okta
Nasdaq
Rakuten
Logitech
Western Union
Autodesk
Dropbox
Okta
Nasdaq
Rakuten
Logitech
Western Union
Autodesk
Dropbox

Zoom: una plataforma para conectar