360EAVP : the edition-aware 360-degree video player

Abstract

Comparados aos vídeos tradicionais estudados há mais de um século, vídeos em 360 graus (vídeos omnidirecionais) representam um tipo de mídia relativamente novo. A exploração da criação de vídeos mais complexos com narrativas no formato de 360 graus ainda está em andamento. No entanto, devido às características únicas dos vídeos em 360 graus, os cineastas ainda estão estabelecendo sua própria identidade e métodos para contar narrativas complexas. Nesses casos, eles enfrentam o desafio de direcionar a atenção dos usuários para as principais cenas e garantir que a mensagem pretendida não seja perdida, sem a capacidade de contar com as técnicas de edição tradicionais devido à falta de controle da câmera. Para enfrentar esse problema, este trabalho apresenta o 360EAVP, uma aplicação web de código aberto para transmissão e visualização de vídeos em 360 graus editados em “Headmounted Displays” (HMDs). O 360EAVP permite direcionar a atenção dos usuários para as principais cenas-chave, estando ciente dessas cenas antes do início do vídeo. As principais características introduzidas pelo 360EAVP são: 1) operação em HMDs com base no viewport do usuário em tempo real; 2) edição dinâmica por meio das técnicas de snap-change ou faderotation; 3) avaliação da visibilidade do viewport do usuário em relação à projeção cúbica do player; 4) incorporação das informações das edições na operação do algoritmo ABR; 5) módulo de previsão do viewport do usuário com base em algoritmos de regressão de ridge ou linear; e 6) coleta de dados durante a reprodução do vídeo. O 360EAVP pode ser usado em pesquisas sobre diversos temas, como otimização da transmissão de vídeo em 360 graus editado com base em segmentos, experimentos psicofísicos, geração de bases de dados, desenvolvimento de algoritmos ABR, etc. Para avaliar o potencial da plataforma, experimentos subjetivos foram realizados como prova de conceito para exemplificar como as técnicas de edição impactam a experiência do usuário. Os resultados mostram que, em sua maioria, as técnicas de edição não reduziram a qualidade de experiência e conforto do usuário. De fato, em alguns cenários, foi observado uma melhora em ambos aspectos.