Автоматизация создания и контроля качества стереовидеоНИР

Automatization of stereo-video creation and quality control

Соисполнители НИР

МГУ имени М.В.Ломоносова Координатор

Источник финансирования НИР

грант РФФИ

Этапы НИР

# Сроки Название
1 13 февраля 2015 г.-31 декабря 2015 г. Автоматизация создания и контроля качества стереовидео
Результаты этапа: Разработан алгоритм оценки качества карт глубины, использовавшихся для конвертации моноскопической видеопоследовательности в стереоскопическую. По результатам работы опубликована статья на International Conference on 3D Imaging Разработан алгоритм классификации сцен стереофильма на сцены, снятые стереокмерой, сцены, конвертированные из моноскопического видео, и сцены, полученные с использованием компьютерной графики. Опубликован отчет, содержащий результаты технического анализа 25 полнометражных стереофильмов, на предмет наличия несоответствий геометрии ракурсов, перепутанных ракурсов, временного сдвига между ракурсами. Разработаны методики объективного сравнения алгоритмов матирования видео и построения эталонных карт прозрачности. Подготовлена база видеопоследовательностей с эталонными картами прозрачности. Высокая корреляция предложенного метода оценки с визуальным качеством карт прозрачности подтверждена путем проведения масштабного субъективного сравнения. По результатам работы создан веб-сайт http://videomatting.com и опубликованы статьи на конференции “British Machine Vision Conference” и в журнале “Цифровая обработка сигналов”. Проведены предварительные эксперименты по оценке утомляемости зрителей при просмотре стереовидео, содержащего различные искажения. Подготовлен тестовый набор стереовидео, содержащий искажения различных типов и интенсивности. В ходе экспериментов фиксировались как результаты опроса респондентов, так и данные ЭЭГ.
2 1 января 2016 г.-31 декабря 2016 г. Автоматизация создания и контроля качества стереовидео
Результаты этапа: Построена тестовая база из 7 видеопоследовательностей для сравнения алгоритмов восстановления фона, содержащая эталонные результаты восстановления фона Проведена экспертная оценка качества 6 алгоритмов восстановления фона на построенной тестовой базе путем попарного сравнения с участием 341 респондента Предложен набор методов объективной оценки качества восстановления фона, превосходящих существующие подходы по корреляции с результатами экспертной оценки Разработан алгоритм матирования видео с использованием восстановленного фона, превосходящий аналоги согласно результатам объективных измерений Разработан алгоритм построения стереоскопических ракурсов, вычисляющий многослойное представление карты глубины, позволяющее корректно обрабатывать области перекрытия нескольких объектов с полупрозрачными границами Разработан новый алгоритм деформации фона для заполнения областей открытия, возникающих при генерации новых ракурсов видео, основанный на задаче оптимизации функции энергии, отвечающей за согласованность деформации областей фона. Увеличена точность работы (с 83.14% до 93.57%) алгоритма определения способа производства сцен стереофильма (стереоскопическая съемка, конвертация из двухмерного фильма и рендеринг из трехмерных моделей). Улучшенная версия алгоритма позволила проанализировать 105 полнометражных фильмов Проведена серия экспериментов для получения субъективной оценки утомляемости, вызванной просмотром стереоскопического видео. Разработан алгоритм предсказания уровня усталости зрителя, вызываемой просмотром сцен и кадров стереофильма. В основе алгоритма лежит рекуррентная нейронная сеть, обученная на экспериментальных данных Проведено экспериментальное исследование визуального дискомфорта, вызываемого просмотром сцен с перепутанными ракурсами. Была построена выборка с эталонной разметкой на основании результатов эксперимента Разработан алгоритм предсказания визуального дискомфорта, вызываемого просмотром сцен с перепутанными ракурсами
3 1 января 2017 г.-31 декабря 2017 г. Автоматизация создания и контроля качества стереовидео
Результаты этапа:

Прикрепленные к НИР результаты

Для прикрепления результата сначала выберете тип результата (статьи, книги, ...). После чего введите несколько символов в поле поиска прикрепляемого результата, затем выберете один из предложенных и нажмите кнопку "Добавить".