Quais soluções para reuniões e chamadas oferecem a melhor experiência de qualidade?

A Wainhouse Research avaliou a qualidade das reuniões e das chamadas telefônicas de seis fornecedores e 10 soluções. Foram conduzidos mais de 2.000 testes.

Fonte: relatório de Avaliação de qualidade de reuniões e chamadas empresariais da Wainhouse Research, janeiro de 2021

Um conjunto importante de testes se concentrou na pontuação VMAF: um padrão criado para avaliar o desempenho e a eficácia dos sistemas de codificação de vídeo, comparando arquivos de vídeo enviados (referência) e recebidos (processados). A VMAF usa um modelo treinado por IA para prever como um usuário classificaria cada vídeo de teste em uma escala de 0 (ruim) a 100 (excelente).

Fonte: relatório de Avaliação de qualidade de reuniões e chamadas empresariais da Wainhouse Research, janeiro de 2021

Este gráfico representa as pontuações VMAF médias (eixo Y): média de 3 vídeos de referência - claro, escuro e movimento - e na linha de base (normal), 5%, 20%, 40% e 70% de etapas de perda de pacote (eixo X).

Média de pontuações VMAF brutas da avaliação da Wainhouse:

Fonte: relatório de Avaliação de qualidade de reuniões e chamadas empresariais da Wainhouse Research, janeiro de 2021

Esta tabela corresponde ao gráfico de pontuação VMAF média: média de 3 vídeos de referência - claro, escuro e movimento - e na linha de base (normal), 5%, 20%, 40% e 70% de etapas de perda de pacote.

Destaques:

• O Zoom começa com a mais alta qualidade de vídeo medida com base nos serviços padrão oferecidos por provedor.
• Com 20% de perda de pacote, o Zoom ainda está na faixa EXCELENTE.
• Com 40% de perda de pacote, o Zoom ainda está na faixa EXCELENTE, quando todos os outros caem para BOM ou abaixo.*
  *Nota do editor: esta estatística foi atualizada em 1/13 para aumentar a precisão.

A Wainhouse também conduziu testes para avaliar o desempenho de supressão de ruído de soluções de chamadas empresariais. A supressão de ruído se tornou mais importante à medida que mais pessoas trabalham fora do ambiente de um escritório empresarial. Muitos provedores melhoraram seus recursos de supressão de ruído, então este estudo os compara lado a lado.

Fonte: relatório de Avaliação de qualidade de reuniões e chamadas empresariais da Wainhouse Research, janeiro de 2021

Este teste começa com um arquivo de referência de forte ruído marrom, que soa como um ar condicionado barulhento operando em velocidade máxima. O ruído de referência é enviado através de cada solução com o recurso de supressão habilitado (quando disponível), gravado no outro lado, e a quantidade de ruído registrada é medida em relação ao arquivo de referência original. As formas de onda laranja representam o ruído marrom presente em cada teste - você pode ver o arquivo de ruído não filtrado acima e a gravação de cada solução em comparação com o arquivo de ruído original (em forma de onda cinza) abaixo.

Embora um exemplo de uma situação real se concentre em como a supressão de ruído de fundo pode tornar uma voz mais audível, este teste visa levar a supressão de ruído de cada provedor de chamadas ao extremo para compreender a eficácia e o tempo necessário para que o ruído comece a ser suprimido.

A imagem a seguir mostra como o serviço de chamadas de cada provedor suprimiu o ruído marrom do mesmo arquivo de referência.

Fonte: relatório de Avaliação de qualidade de reuniões e chamadas empresariais da Wainhouse Research, janeiro de 2021

• Webex Calling - começa a identificar o ruído de fundo por volta de 11 segundos após o início do áudio e reduz apenas ligeiramente o ruído.
• 8x8 - identifica o ruído de fundo antes do primeiro segundo e o reduz ligeiramente, mas aumenta a supressão por volta dos 12 segundos.
• RingCentral - também identifica o ruído antes do primeiro segundo, mas aumenta a supressão mais cedo, por volta dos 9 segundos.
• Microsoft Teams - identifica o ruído imediatamente e reduz o ruído de fundo mais rapidamente em comparação com os provedores anteriores, mas ainda tem maior variabilidade no quanto é reduzido ao longo desse período de tempo. Observe que este teste está usando a mais recente atualização da tecnologia de supressão de ruído da Microsoft.
• Webex Teams - também identifica o ruído imediatamente, mas faz um trabalho melhor em manter uma supressão de ruído mais consistente.
• Zoom - também identifica o ruído imediatamente, mas reduz drasticamente o ruído de fundo ao máximo e mantém a maior supressão de ruído do conjunto de amostras analisado. Além disso, o Zoom continua a reduzir o ruído ainda mais com o passar do tempo.

Esses dois resultados da avaliação representam apenas uma pequena parte dos milhares de testes conduzidos pela Wainhouse Research para ajudar a responder à pergunta sobre qual provedor de soluções oferece objetivamente a melhor experiência de qualidade em reuniões e chamadas.

Para saber mais sobre como a Wainhouse Research desenvolveu sua metodologia de teste, variáveis controladas, pontuação ponderada e calculou sua resposta, junte-se a nós para um fascinante Webinar Zoom no dia 28 de janeiro. Este webinar também incluirá uma visão geral dos outros resultados da avaliação, como qualidade de áudio de reuniões empresariais, desempenho do sistema de reuniões empresariais, comparações de teste subjetivo a objetivo e qualidade de áudio de VoIP empresarial.

Inscreva-se hoje mesmo no webinar de 28 de janeiro intitulado “Questões de qualidade de serviço: a Wainhouse Research discute descobertas recentes sobre reuniões e telefonia”.