In het eigen AI Performance Report komt Zoom als snelste en slimste videocallplatform uit de bus. Het onderzoek, onafhankelijk uitgevoerd door TestDevLab, laat zien dat de AI-prestaties tot betere transcripties, samenvattingen en stabiliteit leiden.
Zoom laat al langer TestDevLab het veldwerk doen om aan de weg te timmeren qua prestaties. Zelf zijn wij al eens langsgeweest bij dit Letse softwaretestbedrijf. Hoewel ze zijn ingeschakeld door Zoom, zijn de resultaten herhaalbaar en transparant. De doelstelling voor Zoom is om als beste uit deze tests te komen, dat natuurlijk wel.
Verschillende tests
De AI-vaardigheden van videocall-oplossingen zijn in drie componenten te onderscheiden: transcripties, samenvattingen en conversationele AI. Eerstgenoemde wordt beoordeeld op basis van een Word Error Rate en vergeleken met een menselijke transcriptie. De samenvatting heeft vervolgens tal van criteria o.b.v. onder meer accuratesse, volledigheid en structuur. Als laatste moet de AI-chatbot als wendbare gesprekspartner goed uit de verf komen.
De onderlinge verschillen tussen Zoom, Teams en Webex zijn het grootst bij de transcripties, waar Zoom 7,4 procent van de tijd in de mist gaat, Webex 10,2 procent en Teams 11,5 procent. In de andere tests zitten de fouten binnen een enkel procentpunt. Teams bevat twee manieren om meetings samen te vatten: via Copilot of geïntegreerd als “Intelligent Recap”. Laatstgenoemde zakt relatief door het ijs en is vooral te praatgraag. Uiteindelijk zitten de testresultaten verrassend dichtbij elkaar en levert elke oplossing dus een vergelijkbare set aan AI-mogelijkheden.
Snel
Waar de tests nog een uitstapje maken, is als het om pure snelheid gaat. De AI-chatbot van Zoom reageert doorgaans binnen een halve seconde, terwijl Webex hier net boven zit en Teams bijna een seconde erover doet om een respons te genereren. Let wel: dit is via de browser, het is goed mogelijk dat een AI-pc met lokale mogelijkheden sneller op vragen reageert omdat er geen internetverbinding vereist is voor de functionaliteit.
Lees ook: Zoom biedt samen met startup Suki AI-notulist voor de zorg