Просмотр по

Disney Research автоматизирует формирование сюжетных фотоальбомов

Disney Research автоматизирует формирование сюжетных фотоальбомов

Общедоступность цифровых камер, камерафонов и планшетов с возможностью фотосъемки необыкновенно упростила получение фотоснимков. Оборотной стороной такого прогресса стала часто усложнившаяся задача сортировки массы накопившихся фотографий, нахождения из числа них нужных и интересных, и компоновки из них логических сюжетов.

Решить ее призван метод, разработанный командой во главе с Леонидом Сигалом (Leonid Sigal) из Disney Research, какой был представлен на Зимней конференции IEEE по приложениям компьютерного зрения (WACV 2015), прошедшей 6-9 января в Вайколоа Бич (Гавайи).

Концепция автоматической компоновки фотоальбомов не только сортирует фотоснимки по критериям качества и релевантности, но и пытается составлять из них логическую последовательность.

«Профессиональные фотографы, составляющие свадебные альбомы или слайд-шоу, знают, что точный хронологический порядок снимков часто меньше важен, нежели логика повествования», — говорит Сигал.

Так, в фоторассказах, составленных четырьмя участниками эксперимента из пяти фотографий, хронологическая последовательность не соблюдалась в 40% случаев. При этом, последующая проверка с использованием крауд-ресурса Mechanical Turk продемонстрировала, что люди отдавали предпочтение именно таким подборкам, а не скомпонованным произвольно или согласно времени съемки.

Однако процесс формирования альбомов вручную способен быть очень трудоемким, особенно в случае больших фотоколлекций. По этой причине исследовательская группа, включающая, кроме сотрудников Disney Research, их коллег из Университета Центральной Флориды и Вашингтонского университета, попыталась найти способ его автоматизации.

Компьютерная модель, созданная ими, учитывает много факторов, подобных как наличие или отсутствие лиц на фотографии и их пространственное расположение, текстуры и цвета сцены, эстетическое качество каждого изображения. Обучающие алгоритмы позволили внедрить в программу «знания» практических правил компоновки, к примеру, в отношении этого, какие фото лучше ставить в начало, середину и конец альбома, или того, что следует избегать однотипных снимков.

Для тренировки проекты использовались тысячи изображений Flickr, разделенные на 63 тематических фотосета. Каждая коллекция обрабатывалась четырьмя подопытными, которые составляли пятиснимочные альбомы и группировали одинаково выглядящие фотографии.

Обученная концепция успешно справляется с задачей компоновки альбомов из неупорядоченных и неаннотированных массивов фотоснимков. Сигал обращает внимание, что она также способен адаптировать процесс формирования фотоподборок в соответствии с усвоенными при обучении предпочтениями индивидуальных пользователей.

Добавить комментарий

Ваш e-mail не будет опубликован. Обязательные поля помечены *