AI Companion Meeting & Chat

Zooms federerade AI-metod ger resultat av bästa kvalitet för våra mest populära funktioner

Zooms CTO, Xuedong Huang, diskuterar vår federerade metod för AI och hur den hjälper oss att tillhandahålla högkvalitativa resultat för mötessammanfattning och nästa steg.

8 minuters läsning

Uppdaterad den July 18, 2024

Publicerad den March 26, 2024

Zooms federerade AI-metod ger resultat av överlägsen kvalitet för AI Companions mest populära funktioner

I november 2023 berättade jag hur Zooms federerade AI-metod uppnådde nästan samma kvalitet som OpenAI GPT-4 med bara 6 % av inferenskostnaden. Även om dessa resultat var imponerande kan vi nu leverera ännu bättre AI-kvalitet jämfört med OpenAI:s GPT-4 för våra mest populära mötesfunktioner. Zoom AI Companion minskade de relativa felen med över 20 % (för ”referat” i Zoom-mötessammanfattningen) och 60 % (för ”nästa steg”) jämfört med GPT-4 i vårt interna jämförande blindtest som validerats av människor. 

Som stöd för våra utbildningsinsatser för att förbättra kvaliteten på slutförandet av uppgifter utnyttjar vår unika federerade strategi för AI många avancerade stora språkmodeller (LLM:er) med sluten och öppen källkod som arbetar tillsammans för bättre resultat. Detta till skillnad från andra leverantörer som är knutna till specifika LLM:er. Till exempel har Microsoft Copilot förlitat sig på GPT-4 och Google har förlitat sig på Gemini.

Detta synsätt på AI särskiljer Zoom AI Companion och ger våra kunder en högkvalitativ upplevelse med våra mest populära funktioner. Som jag berättade i min senaste uppdatering använder vi vår egenutvecklade Z-poängräknare för att bedöma kvaliteten på våra AI-genererade resultat. Först använder vi en LLM med lägre kostnad som är bäst lämpad för varje uppgift. Därefter utvärderar vår Z-poängräknare kvaliteten på det initiala slutförandet av uppgiften. Vid behov kan vi använda en annan kompletterande LLM för att finjustera uppgiften. Denna process resulterar i en högre kvalitet på samma sätt som ett team av människor kan åstadkomma mer tillsammans än en enskild individ.

Vi har sedan dess förbättrat vår Z-poängräknare genom att införliva ytterligare kvalitetssignaler från en rad olika LLM:er. För att bättre anpassa oss till människors preferenser förbättrade vi också federerad förstärkningsinlärning. Genom att federera Zooms LLM i kombination med en uppsättning kompletterande LLM:er kan Zooms populära mötessammanfattning leverera högkvalitativa resultat och, enligt vår senaste jämförelse, kan den nu överträffa GPT-4, som används för att driva Copilot i Microsoft Teams.

När det gäller AI-säkerhet minskade vi också den inneboende partiskheten i de flesta LLM:er genom att bilda en kommitté bestående av flera LLM:er som Claude-3, Gemini och GPT-4 för att minska hallucinationer och förbättra vår Zoom-LLM. Till exempel är det osannolikt att olika LLM:er gör samma hallucinationsmisstag, så vi kan generera mer konsekventa svar och minska effekten av avvikande värden. 

Zooms federerade AI-metod är mer effektiv där våra användare behöver den som mest

Vi jämförde nyligen våra resultat från de två populäraste komponenterna i funktionen för mötessammanfattning, nämligen mötesreferat och nästa steg. Över en halv miljon Zoom-kunder har aktiverat dessa funktioner sedan vi lanserade AI Companion i september 2023. 

I vår senaste interna jämförelse lät vi mänskliga domare välja den mest korrekta mötessammanfattningen utan att avslöja vilken AI-modell som användes för att generera varje sammanfattning. Som framgår av diagrammet nedan överträffade Zoom LLM GPT-4 på engelska för både mötesreferat och extrahering av nästa steg i varje blindtest. Vi kan minska de relativa felen i mötesreferat och nästa steg med över 20 % respektive 60 %, vilket direkt kan översättas till överlägsna kvalitetsfördelar.

Figur 1. Mänsklig utvärdering av mötesreferat och nästa steg på engelska. Zoom LLM och Anthropic Claude-3 i kombination ger slutresultat som är betydligt bättre än om man bara använder OpenAI GPT-4.

Figur 1. Mänsklig utvärdering av mötesreferat och nästa steg på engelska. Zoom LLM och Anthropic Claude-3 i kombination ger slutresultat som är betydligt bättre än om man bara använder OpenAI GPT-4.

Vi mätte också kvaliteten på den övergripande mötessammanfattningen för japanska, med Zoom LLM jämfört med GPT-4. Som framgår av diagrammet nedan kunde vår federerade metod leverera bättre resultat här. 

Figur 2. Mänsklig utvärdering av övergripande mötessammanfattning på japanska. Zoom LLM och OpenAI GPT-4 i kombination ger slutresultat som överträffar OpenAI GPT-4 när det används på egen hand.
Figur 2. Mänsklig utvärdering av övergripande mötessammanfattning på japanska. Zoom LLM och OpenAI GPT-4 i kombination ger slutresultat som överträffar OpenAI GPT-4 när det används på egen hand.

Högkvalitativ AI är inbäddad i Zoom Workplace och Zooms företagstjänster

Vi är fast beslutna att ge våra kunder fördelarna med Zoom AI Companion på hela Zoom-plattformen utan extra kostnad med berättigande betalda Zoom-planer.* Detta obevekliga fokus på AI-kvalitet driver högre kundvärde i Zoom Workplace och Zooms företagstjänster. Enligt en GigaOm-studie beställd av Zoom (publicerad den 26 mars 2024) hade AI Companion en noggrannhet på 95 %, och för scenarier med frågor i möten gav AI Companion resultat som var fyra gånger snabbare än ChatGPT-4 web.

Med dessa senaste innovationer kan du känna dig trygg med att varje Zoom-möte kan åtföljas av en AI-genererad mötessammanfattning som har bland den bästa AI-kvaliteten i branschen. 

* AI Companion är kanske inte tillgängligt i alla regioner eller för alla branschgrenar.

Våra kunder älskar oss

Okta
Nasdaq
Rakuten
Logitech
Western Union
Autodesk
Dropbox
Okta
Nasdaq
Rakuten
Logitech
Western Union
Autodesk
Dropbox

Zoom – En plattform för kontakt