Методы создания фоновых изображений и их использование при конвертации 2D-видео в 3D-формат

Аннотация

Постановка проблемы: технология конвертации 2В-видео в ЗВ-формат включает в себя две трудоемкие операции, выполнение которых, как правило, требует больших затрат ручного труда. К этим операциям относятся заполнение областей открытия, возникающих в результате смещения объектов сцены, обусловленного параллаксом, и выделение силуэтов объектов сцены путем семантической сегментации изображений конвертируемой последовательности кадров в процессе создания карты глубины. Цель исследования: разработка методов получения фоновых изображений конвертируемых последовательностей кадров и на их основе технологий заполнения областей открытия и выделения силуэтов изображений движущихся объектов. Результаты: разработаны методы создания фоновых изображений: метод предварительной съемки фонового изображения той же камерой, которая используется для съемки клипа; метод поиска фонового изображения в отснятом клипе и метод монтажа фонового изображения из фрагментов клипа для различных направлений движения объекта, - а также метод заполнения областей открытия, возникающих при конвертации 2В-изображений клипа в ЗВ-формат, с использованием для этой цели фонового изображения и метод выделения силуэтов изображенийдвижущихся объектов, необходимыхдля создания карты глубины, из последовательности кадров клипа путем сопоставления изображений последовательности с фоновым изображением. Практическая значимость: разработанные методы позволяют при конвертации 2В-видео в ЗВ-формат сокращать трудоемкость процесса в десятки и более раз.