VERSUS 24-NOV-2014 MPEG-4 VS H.264/AVC SCOM 2014/2015 PEDRO GONÇALVES & TIAGO COSTA

Transcrição

1 VERSUS FONTE DA IMAGEM DE FUNDO: 24-NOV-2014

2 SUMÁRIO O QUE É A COMPRESSÃO DE VÍDEO DIGITAL COMO FUNCIONA A COMPRESSÃO DE VÍDEO TÉCNICAS E CONCEITOS DE COMPRESSÃO DE VÍDEO DIGITAL MPEG-4 MPEG-4 PART 2 INTRODUÇÃO DEFINIÇÃO PERFIS & NÍVEIS H.264/AVC INTRODUÇÃO & PROPÓSITO ALGUMAS DAS NOVAS FUNCIONALIDADES PRINCIPAIS PERFIS & VANTAGENS COMPARAÇÃO DE DESEMPENHO ENTRE MPEG-4 E H.264/AVC H.265/HEVC: O SUCESSOR DO H.264/AVC CONCLUSÃO REFERÊNCIAS 2/38

3 O QUE É A COMPRESSÃO DE VÍDEO DIGITAL? É A REDUÇÃO DA REDUNDÂNCIA DA INFORMAÇÃO DE ÁUDIO & VÍDEO RESULTA EM BITRATES INFERIORES E TAMANHOS DE FICHEIRO REDUZIDOS É USADA PARA O ARMAZENAMENTO E TRANSMISSÃO DE CONTEÚDOS DE VÍDEO DIGITAIS PODE SER: LOSSLESS SEM PERDA DE INFORMAÇÃO LOSSY COM PERDA DE INFORMAÇÃO MÉTODOS LOSSY RECORREM A: SUBAMOSTRAGEM CROMÁTICA COMPRESSÃO ESPACIAL COMPENSAÇÃO DE MOVIMENTO 3/38

4 COMO FUNCIONA A COMPRESSÃO DE VÍDEO APLICAM-SE ALGORITMOS PARA RETIRAR O MÁXIMO POSSÍVEL DE INFORMAÇÃO REDUNDANTE, EMBORA PROCURANDO MINIMIZAR O IMPACTO SOBRE A QUALIDADE DO VÍDEO REALIZA-SE COM CODECS, QUE REALIZAM: SUBAMOSTRAGEM CROMÁTICA REDUÇÃO DE REDUNDÂNCIA ESPACIAL REDUÇÃO DE REDUNDÂNCIA TEMPORAL OS CODECS IMPLEMENTAM UM TRADE-OFF ENTRE: QUALIDADE DA IMAGEM E DO ÁUDIO TAXA DE COMPRESSÃO (BITRATE E TAMANHO DOS FICHEIROS) COMPLEXIDADE COMPUTACIONAL PARA CODIFICAR/DESCODIFICAR 4/38

5 TÉCNICAS E CONCEITOS DE COMPRESSÃO DE VÍDEO DIGITAL 5/38

6 TÉCNICAS DE COMPRESSÃO DE VÍDEO DIGITAL SUBAMOSTRAGEM CROMÁTICA SINAIS DE VÍDEO SÃO SEPARADOS EM: 1 COMPONENTE DE LUMINOSIDADE (LUMA) 2 COMPONENTES DE COR (CHROMA OU CROMINÂNCIA) IMAGEM ORIGINAL SEM CHROMA SUBSAMPLING IMAGEM COM CHROMA SUBSAMPLING O OLHO HUMANO É MENOS SENSÍVEL À COR QUE AO BRILHO Guarda-se menos informação para as componentes de cor em prol da informação para o brilho Consegue-se uma redução de 33% da largura de banda ao reduzir-se para metade a taxa de amostragem da cor O ser humano não identifica perdas notáveis na qualidade de imagem FONTE DAS IMAGENS: 6/38

7 TÉCNICAS DE COMPRESSÃO DE VÍDEO DIGITAL REDUNDÂNCIA ESPACIAL CADA FRAME POSSUI INFORMAÇÃO ESPACIALMENTE REDUNDANTE OS PIXÉIS VIZINHOS SÃO ALTAMENTE CORRELACIONADOS Espacialmente, uma imagem contém pixéis com valores similares aos seus vizinhos Esta característica permite prever os pixéis vizinhos com uma precisão razoável Pode-se codificar e transmitir menos informação FONTES DAS IMAGENS: 7/38

8 TÉCNICAS DE COMPRESSÃO DE VÍDEO DIGITAL REDUNDÂNCIA TEMPORAL ENTRE FRAMES, GRANDE PARTE DA INFORMAÇÃO É TAMBÉM REDUNDANTE FRAMES SUCESSIVAS SÃO MUITO SIMILARES Os Vídeos têm, tipicamente, entre imagens/s Pouco muda em 1/30 de um segundo Os valores do brilho e da cor dos pixéis de uma determinada imagem tendem a ser muito semelhantes aos valores da imagem anterior Em vez de se codificar individualmente cada imagem, codifica-se apenas as diferenças entre imagens sucessivas FONTE DAS IMAGENS: 8/38

9 CONCEITOS DE COMPRESSÃO DE VÍDEO DIGITAL MACRO-BLOCOS MACRO-BLOCO: UNIDADE DE PROCESSAMENTO BASEADA EM TRANSFORMADAS LINEARES DE BLOCOS (EX.: DCT) AS IMAGENS SÃO DIVIDIDAS EM MACRO-BLOCOS, COM TAMANHOS TÍPICOS DE 8X8 OU 16X16 PIXÉIS, QUE SÃO PROCESSADOS SEPARADAMENTE: APENAS AS DIFERENÇAS ENTRE MACRO-BLOCOS SÃO CODIFICADAS OS REQUISITOS DE BITRATE SÃO MINIMIZADOS SE A DIFERENÇA ENTRE BLOCOS É TÃO PEQUENA QUE NÃO FAZ SENTIDO CODIFICÁ-LA FONTE DA IMAGEM: 9/38

10 CONCEITOS DE COMPRESSÃO DE VÍDEO DIGITAL TIPOS DE FRAME I-FRAMES (INTRA-CODED IMAGE) A codificação da informação da frame é independente das restantes frames. P-FRAMES (PREDICTED IMAGE) Frames codificadas com base em I-Frames prévias. B-FRAMES (BI-DIRECTIONALLY INTERPOLATED IMAGE) Frames interpoladas a partir de frames I ou P, prévias ou posteriores. FONTE DA IMAGEM: 10/38

11 CONCEITOS DE COMPRESSÃO DE VÍDEO DIGITAL VÍDEO ENTRELAÇADO TÉCNICA PARA AUMENTAR A FRAME RATE PERCECIONADA SEM CONSUMIR LARGURA DE BANDA ADICIONAL CADA FRAME DE VÍDEO É QUEBRADA EM DOIS FIELDS COM METADE DAS LINHAS DE RESOLUÇÃO: FIELD ÍMPAR FIELD PAR A SUCESSÃO RÁPIDA DOS FIELDS PROVOCA UMA SENSAÇÃO DE MOVIMENTO MAIS SUAVE (FENÓMENO PHI) FONTE DAS IMAGENS: 11/38

12 MPEG-4 & MPEG-4 PART 2 / H /38

13 QUE SOLUÇÕES DE CODIFICAÇÃO DE VÍDEO EXISTEM? MPEG-1, MPEG-2 Part 2 H.264 (MPEG-4 Part 10) VC1, Theora VP9, RealVideo RV40 MPEG-4 Part 2 H.265 HEVC 13/38

14 MPEG-4: PORQUÊ MAIS UM STANDARD? MPEG-4 IS THE NEW WORLDWIDE STANDARD FOR INTERACTIVE MULTIMEDIA CREATION, DELIVERY, AND PLAYBACK FOR THE INTERNET. WHAT MPEG-1 AND ITS DELIVERY OF FULL-MOTION, FULL- SCREEN VIDEO MEANT TO THE CD-ROM INDUSTRY AND MPEG-2 MEANT TO THE DEVELOPMENT OF DVD, MPEG-4 WILL MEAN TO THE INTERNET. IN 14/38

15 MPEG-4: DEFINIÇÃO CONJUNTO EXTENSIVO DE ESPECIFICAÇÕES TECNOLÓGICAS, TENDO O ÁUDIO E O VÍDEO COMO BASE Introduzido em 1998 e designado como standard para um grupo de formatos de compressão de áudio e vídeo Acordado pelo grupo ISO/Moving Picture Experts Group (MPEG) sob o standard ISO/IEC Coding of audio-visual objects Engloba várias funcionalidades do MPEG-1 e MPEG-2 entre outros standards Foi desenhado para cobrir o workflow completo da média digital Captura, edição, codificação, distribuição, reprodução e armazenamento Ainda está em desenvolvimento e está dividido em diversas partes As empresas que promovem compatibilidade com o MPEG-4 nem sempre especificam que partes usam Partes importantes: MPEG-4 Part 2 e MPEG-4 Part 10 A implementação da maior parte das funcionalidades fica ao critério dos developers Provavelmente não existe uma implementação total do MPEG-4 15/38

16 MPEG-4 MELHORIAS NA EFICIÊNCIA DE CODIFICAÇÃO Eficiente para taxas de bits desde poucos Kbps até vários Mbps Eficiência melhorada face ao MPEG-2 (até 1.5x melhor [18] ) Codificação conjunta de diferentes dados Resiliência contra erros para permitir uma transmissão mais robusta Interação com o cenário Audiovisual gerado no recetor FONTE DA IMAGEM: 16/38

17 PERFIS E NÍVEIS PERFIS SUBCONJUNTOS DO STANDARD MPEG-4 DEFINIDOS PARA DETERMINADAS APLICAÇÕES. ESPECIFICAM O CONJUNTO DE FUNCIONALIDADES QUE OS DESCODIFICADORES TÊM QUE IMPLEMENTAR. NÍVEIS RESTRINGEM A COMPLEXIDADE COMPUTACIONAL. EXISTEM UM OU MAIS NÍVEIS POR PERFIL. PERFIS + NÍVEIS PERMITEM QUE SE IMPLEMENTE NUM CODEC APENAS O SUBCONJUNTO NECESSÁRIO DO STANDARD. ASSEGURAM A COMPATIBILIDADE COM OUTROS DISPOSITIVOS QUE SUPORTEM MPEG-4 E QUE USEM A MESMA COMBINAÇÃO. 17/38

18 MPEG-4 Parts MPEG-4 É UM CONJUNTO DE STANDARDS IDENTIFICADOS COMO PARTS PARTE NÚMERO PRIMEIRO ÚLTIMO ÚLTIMA TÍTULO DESCRIÇÃO LANÇAMENTO LANÇAMENTO CORREÇÃO PÚBLICO PÚBLICO PART 1 PART 2 PART 3 ISO/IEC ISO/IEC ISO/IEC SYSTEMS SINCRONIZAÇÃO E MULTIPLEXAGEM DE ÁUDIO E VÍDEO VISUAL FORMATO DE COMPRESSÃO PARA DADOS VISUAIS ÁUDIO CONJUNTO DE FORMATOS DE COMPRESSÃO PARA A CODIFICAÇÃO DE SINAIS DE ÁUDIO (EX. AAC) PART 10 ISO/IEC ADVANCED VIDEO CODING FORMATO DE COMPRESSÃO DE VÍDEOS H.264/AVC 18/38

19 MPEG-4 PART 2 FORMATO DE COMPRESSÃO DE VÍDEO BASEADO EM DCT (DISCRETE COSSINE TRANSFORM) SIMILAR AOS SEUS ANTECESSORES MPEG-1 PART 2 E MPEG-2 PART 2/H.262 USADO PELOS CODECS MAIS POPULARES: DIVX, XVID E NERO DIGITAL TEM APROXIMADAMENTE 21 PERFIS: SIMPLE, ADVANCED SIMPLE, CORE, MAIN,... 19/38

20 MPEG-4 PART 2 Simple Profile Maioritariamente usado em dispositivos que estão limitados a baixos bitrates e baixas resoluções Ex.: Telemóveis, Vídeo Conferência Low-End, Sistemas de Vigilância... Advanced Simple Profile As funcionalidades mais notáveis do Advanced Simple Profile face ao Simple Profile: Suporte para quantização MPEG-style Suporte para vídeo entrelaçado Suporte para B-frames Quarter-pixel motion compensation (Qpel) Global Motion Compensation (GMC) 20/38

21 H.264/AVC MPEG-4 PART 10 / ADVANCED VIDEO CODING 21/38

22 H.264/AVC MPEG-4 PART 10 INTRODUÇÃO TORNOU-SE UM DOS FORMATOS MAIS UTILIZADOS PARA GRAVAÇÃO, COMPRESSÃO E DISTRIBUIÇÃO DE CONTEÚDOS DE VÍDEO SURGIU EM 2003, RESULTADO DE UMA PARCERIA ENTRE: ITU-T VIDEO CODING EXPERTS GROUP MOVING PICTURE EXPERTS GROUP É UM DOS STANDARDS USADOS NOS DISCOS BLU-RAY [19] E NA WEB EM HTML5 É EXTREMAMENTE POPULAR EM SERVIÇOS DE STREAMING OU PARTILHA DE VÍDEOS COMO O YOUTUBE [20] DEVIDO À SUA RELAÇÃO BITRATE / QUALIDADE DE IMAGEM, É TAMBÉM USADO EM TRANSMISSÕES HDTV COMO A TDT PORTUGUESA [21] 22/38

23 H.264/AVC MPEG-4 PART 10 PROPÓSITO [2] OFERECER: CODIFICAÇÃO DE VÍDEO MAIS EFICIENTE E ROBUSTA SUPORTAR: LARGA VARIABILIDADE DE REQUISITOS DE LARGURA DE BANDA E DE FORMATOS DE IMAGEM AMBIENTES DE REDE COM PERDA DE PACOTES E LARGURA DE BANDA IRREGULAR 23/38

24 H.264: ALGUMAS DAS NOVAS FUNCIONALIDADES PREDIÇÃO TEMPORAL (INTER-FRAME) MELHORADA COM ATÉ 16 FRAMES DE REFERÊNCIA PREDIÇÃO ESPACIAL (INTRA-FRAME) MAIS NÍTIDA: MACRO-BLOCOS DE TAMANHO VARIÁVEL E PRECISÃO ¼ PIXEL CODIFICAÇÃO LOSSLESS DE MACRO-BLOCOS UTILIZA NOVAS TRANSFORMADAS, PARA ALÉM DA DCT, QUE PROPORCIONAM MELHORES TAXAS DE COMPRESSÃO RECORRE À QUANTIZAÇÃO LOGARÍTMICA PARA UMA GESTÃO OTIMIZADA DA BITRATE INCLUI UM FILTRO DEBLOCKING (ANTI-BLOCOS) PARA MINIMIZAR ARTEFACTOS VISUAIS IMPLEMENTA NOVAS TÉCNICAS DE CODIFICAÇÃO BASEADA NA ENTROPIA DA FONTE (LOSSLESS) : CABAC: CONTEXT-ADAPTIVE BINARY ARITHMETIC CODING (MAIS EFICAZ) CAVLC: CONTEXT-ADAPTIVE VARIABLE-LENGTH CODING (MENOS EXIGENTE COMPUTACIONALMENTE) EXPONENTIAL-GOLOMB CODING INTRODUZ FUNCIONALIDADES PARA LIDAR COM PERDAS DE FRAMES (EX.: SLICES REDUNDANTES) 24/38

25 H.264: PRINCIPAIS PERFIS BASELINE PROFILE É a implementação mais básica do standard Indicado para vídeo não-entrelaçado (videoconferência e vídeo sobre IP) Recomendado para dispositivos com capacidade de processamento limitada MAIN PROFILE Indicado para sinais de SDTV entrelaçados: pressupõe que os canais são fiáveis e que a baixa latência não é fator determinante HIGH PROFILE Perfil destinado à transmissão de sinais HDTV e armazenamento de vídeo HD (Blu-Ray) EXTENDED PROFILE Adiciona suporta a slices redundantes, úteis em canais de débito variável onde é comum a perda de frames e a resincronização. Limita a propagação de erros inter-frame. Indicado para servidores com aplicações de streaming 25/38

26 H.264: VANTAGENS FACE A STANDARDS ANTERIORES PRESERVA A QUALIDADE DE IMAGEM, REDUZINDO A LARGURA DE BANDA PARA 50% Proporciona a viabilidade de uma oferta de canais e serviços mais variada por parte dos operadores HDTV INTRODUZ MECANISMOS DE TOLERÂNCIA A ERROS E A LATÊNCIAS ELEVADAS Facilita a proliferação de conteúdos de streaming de vídeo de alta qualidade em redes IP FACILITA A PARTILHA E ARMAZENAMENTO DE CONTEÚDOS HD A redução da largura de banda significa também uma redução do tamanho dos ficheiros na mesma proporção PERMITE OFERECER MAIOR QUALIDADE DE IMAGEM EM REDES MÓVEIS Ou reduzir o consumo de tráfego / suportar larguras de banda inferiores AS VANTAGENS SÃO RESULTADO DE UM ALGORITMO DE CODIFICAÇÃO: MAIS EFICIENTE MAS TAMBÉM MAIS EXIGENTE DO PONTO DE VISTA COMPUTACIONAL 26/38

27 COMPARATIVO 27/38

28 MPEG-4 (Part 2) vs H.264 FONTE DA IMAGEM: 28/38

29 MPEG-4 (Part 2) vs H.264 COMPARAÇÃO ENTRE O ESPAÇO OCUPADO PELO MESMO VÍDEO USANDO FORMATOS DIFERENTES [3] COMPARAÇÃO ENTRE A LARGURA DE BANDA UTILIZADA PELO MESMO VÍDEO USANDO FORMATOS DIFERENTES [3] FONTES DAS IMAGENS: 29/38

30 MPEG-4 (Part 2) vs H.264 FONTE DA IMAGEM: 30/38

31 MPEG-4 (Part 2) vs H.264 FONTE DA IMAGEM: 31/38

32 H.265/HEVC O SUCESSOR DO H /38

33 HEVC/H.265: O sucessor do H.264 H.265 VS H.264 (VALORES TÍPICOS PARA QUALIDADE DE IMAGEM IDÊNTICA) AVALIAÇÃO OBJETIVA (PSNR): bitrate 25% a 35% inferior [15] AVALIAÇÃO SUBJETIVA: bitrate 49% a 66% inferior [16] [17] COMPLEXIDADE DE COMPUTAÇÃO: 5x a 10x mais exigente [15] FONTES DAS IMAGENS: /38

34 CONCLUSÃO STANDARDS DE CODIFICAÇÃO DE VÍDEO MAIS EFICIENTES SERÃO SEMPRE BEM-VINDOS O aumento de capacidade de processamento dos dispositivos e as limitações das redes IP favorecem o trade-off do aumento da complexidade computacional pelaredução de largura de banda Isto é especialmente importante em cenários de utilização móvel onde o tráfego disponível é limitado O PARADIGMA DE CONSUMO DE VÍDEO ATUAL ASSENTA SOBRE A INTERNET Reforça-se assim a importância da utilização de codecs eficientes e tolerantes a erros e perda de pacotes A REDUÇÃO DA BITRATE TAMBÉM OFERECE VANTAGENS NA TRANSMISSÃO CONVENCIONAL DE TELEVISÃO Permite a proliferação de conteúdos HD sem que seja necessário ocupar uma maior largura de banda, garantindo-se uma utilização mais eficiente do limitado espetro eletromagnético EM BREVE, MESMO O H.264 SERÁ SUBSTITUÍDO POR STANDARDS AINDA MAIS EFICIENTES, AINDA QUE COMPUTACIONALMENTE MAIS EXIGENTES 34/38

35 REFERÊNCIAS 1. Apple, Inc., (2014). MPEG-4 The New Standard for the Internet, powered by Quicktime. [online] Disponível em: [Acedido a 15 Nov. 2014]. 2. Aventuracctv.com, (2014). Aventura CCTV - Aventura CCTV - Why the buzz about H.264?. [online] Disponível em: [Acedido a 19 Nov. 2014]. 3. Aventuracctv.com, (2014). Aventura CCTV - Aventura CCTV - H.264 Technology. [online] Disponível em: [Acedido a 19 Nov. 2014]. 4. Cs.dartmouth.edu, (2014). [online] Disponível em: [Acedido a 15 Nov. 2014]. 5. Globalspec.com, (2014). 5.7 Spatial and temporal redundancy in MPEG On GlobalSpec. [online] Disponível em: spatial-and-temporal-redundancy-in-mpeg [Acedido a 16 Nov. 2014]. 6. Red.com, (2014). Chroma Subsampling Techniques. [online] Disponível em: [Acedido a 15 Nov. 2014]. 35/38

36 REFERÊNCIAS 7. Robertson, M. (2007). H.264 versus MPEG-4 - Video Encoding Formats Compared. [online] ReelSEO. Disponível em: [Acedido a 17 Nov. 2014]. 8. Simply5.quora.com, (2014). Video Compression(Temporal Redundancy).Simplified. - REALM - Quora. [online] Disponível em: Redundancy-Simplified [Acedido a 17 Nov. 2014]. 9. Simply5.quora.com, (2014). Video Compression(Spatial Redundancy).Simplified. - REALM - Quora. [online] Disponível em: Redundancy-Simplified [Acedido a 16 Nov. 2014]. 10. Velleman, (2014). The difference between MPEG-4 and H.264. [online] Disponível em: [Acedido a 17 Nov. 2014]. 11. Wikipedia, (2014). Chroma subsampling. [online] Disponível em: [Acedido a 15 Nov. 2014]. 12. Fischer, B. (1999). Subdivision Into Macro Blocks - Video Guide Part 3: Video Formats and Compression Methods. [online] Tom's Hardware. Disponível em: [Acedido a 22 Nov. 2014]. 36/38

37 REFERÊNCIAS 13. Cs.cf.ac.uk, (2014). Intra Frame Coding. [online] Disponível em: [Acedido a 22 Nov. 2014]. 14. Ozer, J. (2011). What is H.264? - Streaming Media Magazine. [online] Streaming Media Magazine. Disponível em: [Acedido a 22 Nov. 2014]. 15. Hruska, J. (2014). H.265 benchmarked: Does the next-generation video codec live up to expectations? ExtremeTech. [online] ExtremeTech. Disponível em: [Acedido a 22 Nov. 2014]. 16. Infoscience, (2014). Subjective quality evaluation of the upcoming HEVC video compression standard. [online] Disponível em: [Acedido a 22 Nov. 2014]. 17. Wikipedia, (2014). High Efficiency Video Coding. [online] Disponível em: [Acedido a 22 Nov. 2014]. 37/38

38 REFERÊNCIAS 18. Aventuracctv.com, (2014). Aventura CCTV - Aventura CCTV - H.264 Technology. [online] Disponível em: [Acedido a 22 Nov. 2014]. 19. Blu-ray.com, (2014). Blu-ray.com - Blu-ray FAQ. [online] Disponível em: [Acedido a 22 Nov. 2014]. 20. Support.google.com, (2014). Advanced encoding settings - YouTube Help. [online] Disponível em: [Acedido a 22 Nov. 2014]. 21. PT Inovação, (2014). Especificação para Televisores TDT Portugal Telecom. [online] Disponível em: [Acedido a 22 Nov. 2014]. 38/38