Недавно профессор Мен Ван (Meng Wang) из Технологического университета в Хэфэе и его коллеги опубликовали отчет о результатах тестирования приложения «Movie2Comics» в научном периодическом издании «IEEE Transactions on Multimedia». «Наше приложение окажется полезным, как для профессионалов, так и для любителей, — объянил разработчик обозревателям PhysOrg.com. — Первые смогут использовать инструмент в своей повседневной работе. А вторые наверняка получат немало удовольствия от создания комиксов «по мотивам» материалов домашней видеосъемки».

Предлагаемый китайскими разработчиками процесс стилизации видеофрагмента состоит из нескольких этапов. Одной из ключевых стадий является использование специального алгоритма, который идентифицирует говорящего персонажа в сцене с несколькими участниками, автоматически генерирует панели разных размеров, определяет местоположение «пузырьков» с речью и преобразует кадры видеоролика в привлекательный рисунок.

В качестве примера использования программы исследователи предложили полтора десятка комиксов, созданных на основе коротких (длительностью от 2 до 7 минут) фрагментов популярных фильмов, таких как «Титаник» и «Шерлок Холмс». Можно увидеть, что в большинстве случаев алгоритм превосходно справился со своей задачей. Впрочем не обошлось и без ошибок, когда пузырьки с прямой речью были прикреплены к неправильному персонажу. По словам исследователей, точность распознавания на данный момент составляет 85%, однако в будущем этот показатель будет улучшен.

Сгенерированные компьютером комиксы были предложены вниманию группы добровольцев. Разработчиков интересовало, насколько успешным оказался перенос истории в статичный формат. Оказалось, что уловить сюжет, изложенный в виде графической новеллы, немного сложнее, чем в оригинальном кинофрагменте. Впрочем, по большому счету эта особенность не зависит от качества исполнения, ее можно наблюдать и в тех случаях, если произведение преобразовывалось в новый формат вручную.

Несмотря на то, что создание графической новеллы на базе фильма может выполняться в автоматическом режиме, ученые уверены, что живых авторов не стоит полностью исключать из творческого процесса. Пользователю не обязательно рисовать «раскадровки» вручную, однако, он сможет вносить необходимые коррективы в предложенные программой варианты, что гарантирует более качественный конечный результат.

«Мы планируем подвергнуть доработке большинство компонентов предлагаемого технологического решения, — сообщил профессор Ван. — Нам также хотелось бы добавить модуль, отвечающий за распознавание человеческой речи. Таким образом, художникам не придется загружать в программу сценарий выбранной сцены с текстовым изложением диалогов и монологов персонажей».

По материалам сайта Physorg.

Последние новости и обзоры программ:

Новая версия Revisor VMS 1.9.2

Вышла обновленная версия Grizzly Антивирус (1.0.40.344)

Сооснователь Apple не видит условий для начала "войны машин"

Samsung Grand Duos взорвался в кармане у жителя Индонезии

Бывший разработчик Telegram раскрыл новые подробности конфликта с Дуровым

В США спрогнозировали будущее российской космонавтики

Россияне оказались готовы к разговору с умным холодильником

Разработан метод создания живой сетчатки глаза при помощи 3D-печати

Siri признана самым тупым искусственным интеллектом

Поддержка Firefox для Windows XP и Vista прекратится в 2018 году

Комментарии на нашем сайте: