Guido Stolfi 1/155 Digitalização de Vídeo e Áudio Guido Stolfi Mackenzie 4 / 2008

Guido Stolfi 2/155 Sinais Contínuos s(t) existe para todo t dentro de um intervalo s(t) pode assumir qualquer valor entre os extremos de amplitude

Guido Stolfi 3/155 Sinais de Tempo Discreto s(t) = s(nT) existe para t = n  T, com n pertencendo ao conjunto dos números inteiros

Guido Stolfi 4/155 Sinais Quantizados s(t) assume valores pertencentes a um conjunto discreto (v 1,v 2,v 3 …v N )

Guido Stolfi 5/155 Digitalização Amostragem + Quantização = Sinais de Tempo Discreto Quantizados  Seqüências de Números Inteiros

Guido Stolfi 6/155 Critérios para Digitalização Amostragem: –Banda passante –Rebatimento Espectral (“Aliasing”) Quantização: –Resolução de Amplitude –Ruído de Quantização

Guido Stolfi 7/155 Amostragem

Guido Stolfi 8/155 Conceito de Amostragem Amostragem consiste no processo de tomar medidas de um sinal contínuo s(t) em intervalos consecutivos, a cada T unidades. (unidades de tempo, espaço, ângulo, etc…) Resulta em uma seqüência s A (nT) de valores numéricos, denominados Amostras, associados aos instantes n  T T = Período de Amostragem f A = 1 / T = Freqüência (ou Taxa) de Amostragem

Guido Stolfi 9/155 Amostragem de um Sinal Contínuo

Guido Stolfi 10/155 Reconstrução de um Sinal Amostrado Cada amostra s A (nT) é substituída por um pulso h(t-nT), posicionado em um ponto correspondente ao instante nT, com amplitude proporcional ao valor de s A (nT) Isso corresponde à convolução de s A (nT) e h(t): Os pulsos h(t) podem ou não apresentar superposição

Guido Stolfi 11/155 Convolução h(t)h(t) s A (nT)s R (t) h(t) s A (nT) =  (t)

Guido Stolfi 12/155 Convolução (Tempo Discreto)

Guido Stolfi 13/155 Exemplo: h(t) Retangular com Duração T (T = 20)

Guido Stolfi 14/155 Exemplo: Outros Pulsos h(t) h(t) triangular com largura 40 h(t) gaussiano

Guido Stolfi 15/155 Teorema da Amostragem A reconstrução exata de um sinal amostrado é possível se o sinal for limitado em freqüência, e a taxa de amostragem for maior que o dobro da freqüência máxima do sinal. A função de reconstrução ideal é da forma Teorema de Kotelnikov / Shannon / Nyquist

Guido Stolfi 16/155 Amostragem no Domínio do Tempo

Guido Stolfi 17/155 Amostragem no Domínio da Freqüência Transformada de Fourier: Convolução:

Guido Stolfi 18/155 Espectro de s(t)

Guido Stolfi 19/155 Espectro da Função de Amostragem a (t) A()A() (ms) (Hz)

Guido Stolfi 20/155 Espectro do Sinal Amostrado

Guido Stolfi 21/155 Requisito para Reconstrução Não pode haver superposição de espectro, após convolução entre S(  ) e A(  ) Equivale a garantir que f A  2 f M Reconstrução exige aplicação de um filtro passa- baixas ideal, no caso limite f A = 2 f M

Guido Stolfi 22/155 Filtro de Reconstrução Ideal

Guido Stolfi 23/155 Reconstrução com sen(x)/x

Guido Stolfi 24/155 Reconstrução com Pulso Retangular

Guido Stolfi 25/155 Reconstrução com Pulso Retangular

Guido Stolfi 26/155 Rebatimento Espectral: f A >> 2 f M

Guido Stolfi 27/155 Rebatimento Espectral: f A >> 2 f M

Guido Stolfi 28/155 Rebatimento Espectral: f A >> 2 f M

Guido Stolfi 29/155 Rebatimento Espectral: f A < 2 f M (“Aliasing”)

Guido Stolfi 30/155 Rebatimento Espectral: f A < 2 f M (“Aliasing”)

Guido Stolfi 31/155 Sistema de Amostragem s(t)s(t) a(t)a(t) sA(t)sA(t)sR(t)sR(t) Filtro “anti-aliasing” Filtro de reconstrução Função de amostragem h(t)h(t)

Guido Stolfi 32/155 Filtro “Anti - Aliasing” Faixa de Passagem Faixa de Transição Faixa de Rejeição 0fMfM fAfA f A / 2

Guido Stolfi 33/155 Critérios para taxa de Amostragem Critério de Nyquist: – f A  2f M (filtro de reconstrução ideal) Critério de Kell: – f A  3f M (aproximado – filtro não ideal)

Guido Stolfi 34/155 Reconstrução com Pulso Retangular (Nyquist) f A = 2,2 f M

Guido Stolfi 35/155 Reconstrução com Pulso Retangular (Kell) f A = 3,3 f M

Guido Stolfi 36/155 Exemplos de Sistemas Amostrados Audio CD: –f M = 20 kHz –f A = 44,1 kHz f A / f M = 2,205

Guido Stolfi 37/155 Exemplos de Sistemas Amostrados Telefonia: –f M = 3,4 kHz –f A = 8 kHz f A / f M = 2,35

Guido Stolfi 38/155 Exemplos de Sistemas Amostrados Video Digital (NTSC): –f M = 4,2 MHz –f A = 13,5 MHz f A / f M = 3,21

Guido Stolfi 39/155 Exemplos de Sistemas Amostrados Miografia (potencial muscular): –f M = 2 kHz –f A = 200 Hz f A / f M = 0,1

Guido Stolfi 40/155 Exemplos de Sistemas Amostrados

Guido Stolfi 41/155 Exemplos de Sistemas Amostrados Amostragem de Sinal de Banda Estreita F.I. TV –f M = 44 +/- 3 MHz –f A = 25 MHz f A / f M = 0,57 f A / f BW = 4,17

Guido Stolfi 42/155 Amostragem de Sinal de Banda Estreita ,537,544 fAfA ,537,544 fAfA O sinal deve estar contido entre múltiplos consecutivos de f A / 2

Guido Stolfi 43/155 Quantização

Guido Stolfi 44/155 Quantização na Conversão A/D

Guido Stolfi 45/155 Sinal Quantizado (4 bits = 16 níveis) ( Q = 1 )

Guido Stolfi 46/155 Erro de Quantização Histograma Espectro

Guido Stolfi 47/155 Modelo do Erro de Quantização Ruído Aleatório Aditivo Distribuição uniforme de Amplitude Amplitude pico-a-pico = Q (passo de quantização) Potência média:

Guido Stolfi 48/155 Relação Sinal-Ruído Sinal quantizado com n bits: 2 n níveis Amplitude de pico do sinal: S P = Q  2 n-1 Potência de pico do sinal: P P = Q 2  2 2n-2 Potência do ruído de quantização: P Q = Q 2 /12 Relação Sinal / Ruído:

Guido Stolfi 49/155 Relação Sinal-Ruído de Quantização Em decibéis: Exemplo: 8 bits => S/R = 52,9 dB (máx.) 16 bits => S/R = 101,1 dB

Guido Stolfi 50/155 Exemplos de Sistemas Quantizados Audio CD –16 bits –S/R = 101 dB (teórica) –~ 90 dB (prática)

Guido Stolfi 51/155 Exemplos de Sistemas Quantizados Gravação Digital de Áudio: –24 bits –S/R = 149 dB (teórica) –~ 100 dB (prática)

Guido Stolfi 52/155 Relação Sinal - Ruído em Vídeo Adota-se a relação entre a amplitude pico-a-pico do sinal e a amplitude RMS do ruído de quantização:

Guido Stolfi 53/155 Considerando a Banda Passante A limitação da resposta em freqüência após a quantização reduz a potência do ruído dentro da banda do sinal: f f A/2 fAfA fVfV

Guido Stolfi 54/155 Considerando “Headroom” V B -V P VTVT

Guido Stolfi 55/155 Considerando a Resposta em Freqüência da Percepção Visual onde f 1 = 270kHz, f 2 = 1.37MHz e f 3 = 390kHz f

Guido Stolfi 56/155 Relação S / R de Quantização Total 8 bits fAfA 2 f V VTVT 100 IRE A( f ) Exemplo: 8 bits

Guido Stolfi 57/155 Instabilidade da Frequencia de Amostragem f IN = Frequencia do sinal de entrada sendo amostrado t J = Valor RMS da incerteza temporal da amostragem (“jitter”)

Guido Stolfi 58/155 Amostragem Bidimensional

Guido Stolfi 59/155 Amostragem de uma Imagem 2-D s(t)  s(x, y) s(.)  R, G, B ou Y, U, V Filtro “Anti-aliasing”  Abertura Equivalente de Captura “Aliasing”  Figuras de “Moirée” Função de Reconstrução  MTF, “Spot Profile”

Guido Stolfi 60/155 Digitalização de Vídeo

Guido Stolfi 61/155 Estrutura de Amostragem Espacial Taxas de Amostragem podem ser independentes nos sentidos x e y Amostras podem ou não serem alinhadas nos sentidos x e y Em geral, estrutura é retangular; ocasionalmente, quadrada

Guido Stolfi 62/155 Amostragem e Reconstrução Imagem Estrutura de Amostragem Espacial Abertura Equivalente de Captura Pixel Função de Reconstrução

Guido Stolfi 63/155 Reprodução de uma Imagem com Função de Reconstrução Quadrada

Guido Stolfi 64/155 Reprodução de uma Imagem com Função de Reconstrução Gaussiana

Guido Stolfi 65/155 John Lennon

Guido Stolfi 66/155 Resolução Espacial

Guido Stolfi 67/155 Padrão de Teste de Resolução Espacial

Guido Stolfi 68/155 Função de Transferência de Contraste (CTF)

Guido Stolfi 69/155 Função de Transferência de Modulação (MTF) Obtida da mesma forma que a CTF, quando o padrão de barras tem variação senoidal de luminância (ao invés de retangular) É a resposta em freqüência espacial do sistema MTF de um sistema linear com elementos em série é o produto das MTF’s dos seus elementos

Guido Stolfi 70/155 MTF da Visão Humana

Guido Stolfi 71/155 Unidade de Medida: Linhas de TV Quantidade de linhas pretas + brancas contidas em uma distância igual à altura da imagem V V

Guido Stolfi 72/155 Amostragem e Reconstrução No domínio Espacial: –Convolução da imagem com a abertura equivalente de captura –Amostragem –Convolução da amostra com a função de Reconstrução No domínio da Freqüência: –Filtragem pela MTF do processo de captura –Amostragem (translação e replicação espectral) –Filtragem pela MTF do processo de reconstrução

Guido Stolfi 73/155 Espectro Bi-dimensional y x Domínio do Espaço Domínio da Freqüência Espacial fXfX fYfY

Guido Stolfi 74/155 Espectro Bi-dimensional y x Domínio do Espaço Domínio da Freqüência Espacial fXfX fYfY

Guido Stolfi 75/155 Espectro Bi-dimensional y x Domínio do Espaço Domínio da Freqüência Espacial fXfX fYfY

Guido Stolfi 76/155 Espectro Bi-dimensional y x Domínio do Espaço Domínio da Freqüência Espacial fXfX fYfY

Guido Stolfi 77/155 “Aliasing” Espacial: Efeito “Moirée” Imagem Original Imagem Amostrada

Guido Stolfi 78/155 “Aliasing” Espacial: Efeito “Moirée” Imagem Original Imagem Amostrada e reconstruída

Guido Stolfi 79/155 Espectro 2-D da Imagem Amostrada fXfX fYfY fXfX fYfY f AY f AX

Guido Stolfi 80/155 Redução do “Aliasing” Espacial por Filtragem Imagem Filtrada por Imagem Amostrada abertura equivalente e reconstruída

Guido Stolfi 81/155 Espectro 2-D da Imagem Filtrada fXfX fYfY f AY f AX fXfX fYfY fXfX fYfY Amostragem Filtragem espacial

Guido Stolfi 82/155 Visibilidade do Ruído de Quantização Q = 1 / 256 Q = 1 / 16

Guido Stolfi 83/155 Visibilidade do Ruído de Quantização

Guido Stolfi 84/155 Quantização com “Dithering” * Sinal Ruído Quantizador s(t)s(t) r(t)r(t) sA(t)sA(t)

Guido Stolfi 85/155 Quantização com “Dithering”

Guido Stolfi 86/155 Visibilidade de Quantização com “Dithering” Q = 1 / 256 Q = 1 / 16 d = 1/16

Guido Stolfi 87/155 Critério de Kell x Nyquist

Guido Stolfi 88/155 f M / f A = 0,1

Guido Stolfi 89/155 f M / f A = 0,2

Guido Stolfi 90/155 f M / f A = 0,3

Guido Stolfi 91/155 f M / f A = 0,3 fXfX fYfY fYfY fXfX f AY f AX

Guido Stolfi 92/155 f M / f A = 0,35

Guido Stolfi 93/155 f M / f A = 0,4

Guido Stolfi 94/155 f M / f A = 0,45

Guido Stolfi 95/155 f M / f A = 0,5

Guido Stolfi 96/155 f M / f A = 0,5 fXfX fYfY fXfX fYfY f AY f AX

Guido Stolfi 97/155 f M / f A = 0,55

Guido Stolfi 98/155 f M / f A = 0,8

Guido Stolfi 99/155 f M / f A = 0,8 fYfY fXfX fYfY fXfX f AY f AX

Guido Stolfi 100/155 f M / f A = 0,95

Guido Stolfi 101/155 f M / f A = 0,2

Guido Stolfi 102/155 f M / f A = 0,3

Guido Stolfi 103/155 f M / f A = 0,35

Guido Stolfi 104/155 f M / f A = 0,4

Guido Stolfi 105/155 f M / f A = 0,45

Guido Stolfi 106/155 f M / f A = 0,5

Guido Stolfi 107/155 f M / f A = 0,95

Guido Stolfi 108/155 f M / f A = 0,95 fXfX fYfY fXfX fYfY f AY f AX

Guido Stolfi 109/155 f M / f A = 0,35

Guido Stolfi 110/155 f M / f A = 0,4

Guido Stolfi 111/155 f M / f A = 0,5

Guido Stolfi 112/155 f M / f A = 0,35

Guido Stolfi 113/155 f M / f A = 0,4

Guido Stolfi 114/155 f M / f A = 0,45

Guido Stolfi 115/155 f M / f A = 0,5

Guido Stolfi 116/155 Amostragem com Função de Reconstrução Triangular

Guido Stolfi 117/155 f M / f A = 0,35

Guido Stolfi 118/155 f M / f A = 0,35 fXfX fYfY fXfX fYfY f AY f AX

Guido Stolfi 119/155 f M / f A = 0,3

Guido Stolfi 120/155 f M / f A = 0,35

Guido Stolfi 121/155 f M / f A = 0,4

Guido Stolfi 122/155 f M / f A = 0,45

Guido Stolfi 123/155 f M / f A = 0,5

Guido Stolfi 124/155 Amostragem 3-D (Espaço – Tempo)

Guido Stolfi 125/155 Amostragem de uma Imagem em Movimento ( Y,U,V ) = s ( x, y, t )

Guido Stolfi 126/155 Amostragem de uma Imagem em Movimento Amostragem temporal (t): –Fotogramas Amostragem Espacial (y): –Varredura Amostragem Espacial (x): –Digitalização do Sinal de Vídeo

Guido Stolfi 127/155 Espectro Tri-dimensional (Espaço - Tempo) y x fxfx fyfy Imagem com Movimento Espectro Tri-dimensional t ftft a b c

Guido Stolfi 128/155 “Aliasing” Temporal: Efeito “Roda de Carroça” Uma Rotação de 85 graus em sentido Horário......confunde-se com uma rotação de 5 graus......em sentido anti-horário.

Guido Stolfi 129/155 Redução do “Aliasing” Temporal pelo Controle do Tempo de Exposição

Guido Stolfi 130/155 Estruturas de Varredura (Espaço – Tempo) Varredura Progressiva Varredura Entrelaçada

Guido Stolfi 131/155 Espectros das Estruturas de Varredura Varredura Progressiva Varredura Entrelaçada

Guido Stolfi 132/155 Critérios de Dimensionamento na Amostragem de Sinais de Vídeo

Guido Stolfi 133/155 Critérios de Resolução Temporal Remanência da Visão: –15 a 20 imagens (quadros) por segundo para proporcionar ilusão de movimento Cintilação: –48 ~ 60 imagens por segundo Interferências com a Rede Elétrica: 50 / 60 Hz –60 imagens por segundo (EUA, Japão, Brasil –50 imagens por segundo (Europa, Ásia, etc.)

Guido Stolfi 134/155 Critérios de Resolução Espacial Acuidade Visual: –~ 1 minuto de grau Proporção: –4:3 (igual ao cinema de antigamente) –16:9 (compromisso com cinema atual) Tamanho da Imagem: ? Distância de Observação: ?

Guido Stolfi 135/155 A Televisão como Entretenimento

Guido Stolfi 136/155 Ângulos de Visualização da TV Convencional H / L = ¾ a = 10 o b = 7.5 o

Guido Stolfi 137/155 Dimensionamento de um Sistema de TV: Padrão “M” Acuidade Visual: 1/60 de grau Ângulo de visualização: 10 x 7.5 graus  600 x 450 elementos de imagem (pixels)

Guido Stolfi 138/155 Requisitos de Banda Passante 60 quadros por segundo, 600 x 450 pixels 1 pixel = 1 semiciclo da maior freqüência necessária

Guido Stolfi 139/155 Agravante: Tempo de Retraço Tempo de Varredura Tempo de Retraço

Guido Stolfi 140/155 Requisitos de Banda Passante Tempo de retraço: 20% na varredura horizontal e 9% na vertical

Guido Stolfi 141/155 Agravante: Critério de Kell Teorema da Amostragem diz: número de linhas de varredura deve ser maior que o número de linhas (alternadas) a serem exibidas na imagem (f a > 2 x f s ) Fator de Kell = 0,7 (experimental) implicaria em 450  0,7 = 643 linhas de varredura na imagem visível.

Guido Stolfi 142/155 Requisitos de Banda Passante Considerando tempo de retraço e critério de Kell: Considerando Modulação AM: B CH = 2  B W = 30,28 MHz (!!!)

Guido Stolfi 143/155 Atenuante: Acuidade Visual Adotado Limite de Acuidade Visual como 1,33 minutos de grau, considerando nível de luminância Imagem visível passa para 340 x 450 elementos de resolução (480 linhas de amostragem) Adotadas 525 linhas de varredura (incluindo retraço)

Guido Stolfi 144/155 Atenuante: Entrelaçamento Freqüência de Cintilação para detalhes pequenos é muito menor Imagem é subdividida em 2 campos (par e ímpar) Banda Passante cai pela metade (4.2 MHz)

Guido Stolfi 145/155 Atenuante: Modulação Vestigial (VSB) 4,2 MHz -4,2 MHz Vídeo Composto (Banda Base) +4,2 MHz -0,75 MHz +4,5 MHz fo Modulação AM Modulação VSB + Áudio 0 6 MHz

Guido Stolfi 146/155 MTF da Televisão Convencional

Guido Stolfi 147/155 TV de Alta Definição: “Hi-Vision” (~1985)

Guido Stolfi 148/155 Dimensionamento do Ângulo de Visualização para a “Hi-Vision”

Guido Stolfi 149/155 Ocupação do Campo Visual

Guido Stolfi 150/155 Relação de Aspecto da TV de Alta Definição Compatibilidade com formatos de Cinema

Guido Stolfi 151/155 Relação de Aspecto da TV de Alta Definição Compatibilidade com imagens 4:3 4  3 (12  9) 4 

Guido Stolfi 152/155 TV de “Mesma Definição” ,33’

Guido Stolfi 153/155 No Futuro ?

Guido Stolfi 154/155 UHDV – Ultra High Definition Video (2005) >90 O

Guido Stolfi 155/155 UHDV – Ultra High Definition Video ( NHK-2005 ) UHDV