Repository navigation
Vcall 3.21.0
Vcall 3.21.0: a câmera chega mais nítida e congela menos em internet ruim.
O que travava
Medimos a câmera numa chamada a dois passando por uma internet de mentira, com banda, atraso e perda controlados, e comparamos cada quadro recebido com o original. Três coisas pesavam:
- Nenhuma correção de perda no vídeo. Cada pacote perdido fazia a imagem esperar a retransmissão, uma volta inteira pela rede. Na 4G isso dava ~3 s de imagem parada a cada 35 s; numa internet ruim, mais da metade do tempo.
- Codec que gasta banda. A câmera saía em VP8, o padrão do navegador. Na 4G a imagem caía para 480p.
- 60 quadros por segundo dividindo a banda. Com a mesma banda, 60 quadros dão metade dos bits a cada um. Na 4G a imagem a 60 caía para 535p e ficava borrada.
O que mudou
- Correção de perda (FlexFEC) entre apps de mesa. O aplicativo manda pacotes de correção junto com o vídeo, e quem recebe refaz o que se perdeu sem esperar a retransmissão. Vale quando as duas pessoas usam o app de mesa; com quem entra pelo navegador, nada muda.
- VP9 na câmera. A mesma imagem com uns 30 a 40% menos bits. Ele entra pela placa de vídeo quando ela tem, ou pelo processador com 4 núcleos ou mais, fora do celular, até 2 pessoas recebendo. Em salas maiores, sem VP9 na placa, a câmera continua em VP8, que pesa menos no processador.
- Câmera a 30 quadros por segundo, e 60 quando sobra banda. Numa chamada a dois, sem tela compartilhada e com câmera que capture a 60, ela sobe para 60 quando a conexão aguenta e volta para 30 na hora em que aperta. Se o processador não der conta dos 60, ela volta a 30 e só tenta de novo depois de 2 minutos.
Medido
Câmera em 720p, 2 pessoas, tempo com a imagem parada em 35 s (média de 2 a 5 rodadas), altura média da imagem e nitidez (PSNR, quanto maior, mais fiel ao original).
| Internet de cada pessoa | 3.20 | 3.21, entre apps de mesa | 3.21, pelo navegador |
|---|---|---|---|
| Fibra (50 Mbps) | 0,2 s · 674p · 37,5 dB | 0 s · 720p · 38,9 dB | 0 s · 720p · 38,7 dB |
| Casa (6 Mbps, 1% de perda) | 0,4 s · 656p · 36,8 dB | 0 s · 720p · 38,7 dB | 0,5 s · 720p · 38,6 dB |
| 4G (2,5 Mbps, 2% de perda) | 2,7 s · 487p · 33,6 dB | 1,0 s · 720p · 36,7 dB | 2,3 s · 702p · 36,3 dB |
| Ruim (1 Mbps, 4% de perda) | 18,5 s · 360p · 32,5 dB | 13,1 s · 433p · 32,6 dB | 21,1 s · 495p · 32,9 dB |
Pelo navegador, a imagem fica mais nítida, mas a internet ruim continua travando tanto quanto antes: ali o que segura a imagem é a correção de perda, que só o app de mesa liga. Numa internet tão ruim quanto essa (8% de perda somando as duas pontas e ~400 ms de ida e volta), o vídeo ainda para por alguns segundos.
Para quem desenvolve
npm run bench:videomede a câmera numa internet de mentira (--rede fibra|casa|4g|ruim,--pessoas,--trialspara simular o app de mesa). Toda a mídia passa por um TURN e por um proxy que limita banda, fila, atraso e perda, e o PSNR é calculado quadro a quadro contra o vídeo original.
