Um sistema para extração automática de keyframes a partir de fluxos de vídeo direcionado à reconstrução tridimensional de cenários virtuais

Abstract

Utilizar um cenário virtual em TV Digital tornou-se comum com o avanço das tecnologias de hardware e software. Mas para se obter um cenário virtual que convença o telespectador pode-se utilizar reconstruções tridimensionais foto-realísticas como uma possível alternativa. Este trabalho apresenta uma proposta de um método para o pré-processamento de um vídeo, capturado, no mundo real, onde são extraídos frames adequados à reconstrução 3D (keyframes) pelo método SFM (Structure From Motion). Desta forma o processamento para a reconstrução 3D utiliza apenas os frames considerados essenciais, diminuindo as redundâncias e falhas. Com a utilização deste método conseguiu-se reduzir o tempo de processamento durante a reconstrução 3D. Neste trabalho também comparou-se o método proposto com os métodos tradicionais, onde não existe uma prévia seleção de keyframes, utilizando-se diferentes ferramentas de reconstrução baseadas no método SFM

Using a virtual scenario on Digital TV became common with the advance of hardware and software technologies. However, to obtain a virtual scenario that persuades the viewer, photorealistic three-dimensional reconstructions can be used as a possible alternative. This work proposes a method for the pre-processing of a video, captured in the real world, where frames which are appropriate for 3D reconstruction (keyframes) by the method SFM (Structure From Motion) are extracted. Thus the processing for 3D reconstruction use only the frames considered essential, reducing redundancies and gaps. Using this method it was possible to reduce the processing time for the 3D reconstruction. In this work, the proposed method was compared to traditional methods, where there is no prior selection of keyframes, using different tools of reconstruction based on the SFM method