Sincronização de seqüências de vídeo baseada em correspondência de pontos de interesse Autor: André Lima Gaspar Ruas Professor: Mário Fernando de Montenegro.

Apresentação em tema: "Sincronização de seqüências de vídeo baseada em correspondência de pontos de interesse Autor: André Lima Gaspar Ruas Professor: Mário Fernando de Montenegro."— Transcrição da apresentação:

1 Sincronização de seqüências de vídeo baseada em correspondência de pontos de interesse Autor: André Lima Gaspar Ruas Professor: Mário Fernando de Montenegro Campos.

2 Porque Sincronizar Reconstrução estéreo requer imagens obtidas no mesmo instante de tempo. Sincronização por hardware muitas vezes não é possível. Sincronizar manualmente gasta tempo.

3 Definição do problema Dado duas seqüências S 1 = [ f 1 1,f 1 2,..., f 1 n ], S 2 = [ f 2 1,f 2 2,..., f 2 m ]. Encontrar uma relação (f 1 i ) = (f 2 j ).

4 Definição do problema Suposição: as duas seqüências tem taxas de quadros constante. (f 1 i ) = (f 1 0 ) + i. T 1, (f 2 j ) = (f 2 0 ) + j. T 2.

5 Sincronização Suposição: a projeção dos pontos pode ser aproximada por uma projeção afim. [u c i v c i ] T = P c [X i Y i Z i ] T. P c matriz de projeção afim 2 × 3

6 Sincronização Sob Condições ideais W possui posto 3. Ruídos nas correspondências fazem com que W possua posto 4. O último valor singular depende apenas do ruído.

7 Sincronização Menor valor singular = 144.57

8 Sincronização Menor valor singular = 353.27

9 SURF Semelhante ao corners[Harris]. Retorna alem do ponto um descritor para cada ponto. Descritor Invariante a escala e a rotação. Retorna também a informação do sinal do laplaciano.

10 Correspondência Simplesmente descritor mais próximo funciona bem. Pode levar em consideração outros fatores como a localização dos pontos.

11 Correspondência baseada em SURF

12 Como foi feito Seqüência referencia S ref e alvo S tg Matriz de Medição W(F,f)

13 Como foi feito Para cada F em S ref encontrar f em S tg que minimiza o quarto valor singular. regressão para F = f + Regressão feita iterativamente para cada F Busca o melhor f em uma janela em torno do valor esperado.

14 Resultados Gráfico para uma janela de busca de f de largura 91 com uma janela de comparação de largura 7

15 Resultados Regressão F = f +

16 Considerações Finais O algoritmo é robusto a ruído e false matchings Pode encontrar mínimos locais quando a cena possuir movimentos periódicos.

17 Perguntas