Студент ЛЭТИ – победитель хакатона hackMOVIE 2023 по применению нейронных сетей в производстве фильмов
Обучающийся на 2 курсе магистратуры факультета информационно-измерительных и биотехнических систем СПбГЭТУ «ЛЭТИ» Дмитрий Попов занял первое место в хакатоне, который проводился в рамках VIII Международной конференции «Обработка сигналов изображения и звука в контексте нейротехнологий» SPCN 2023.
10 ноября в Институте физиологии им. И. П. Павлова РАН состоялось награждение победителей хакатона hackMOVIE 2023 на торжественной церемонии закрытия VIII Международной конференции, посвященной обработке сигналов изображения и звука в контексте нейротехнологий. Данное мероприятие предоставляет ученым уникальную возможность междисциплинарного общения в наиболее быстро развивающихся областях когнитивных наук, сенсорной физиологии, нейротехнологий, а также искусственного интеллекта.
На участие в хакатоне поступило 50 заявок, из них отбор прошли 15 команд, которые представляли Санкт-Петербургский государственный электротехнический университет «ЛЭТИ» (СПбГЭТУ «ЛЭТИ»), Московский государственный университет им. М.В. Ломоносова (МГУ) и Санкт-Петербургский государственный институт кино и телевидения (СПбГИКиТ).
Задание хакатона предусматривало создание видеофильма длительностью до 60 секунд с использованием нейросетей в процессе решения задач трех этапов: составление сценария видеофильма с использованием любой нейросетевой языковой модели; создание раскадровки видеофильма с помощью нейросети, преобразующей текст в изображения; создание видеофильма на основе сценария и раскадровки с помощью любого алгоритма искусственного интеллекта для генерации контента. Всем командам для развития сюжета была предоставлена единственная ключевая фраза для запроса в нейросети: «Студент несет стопку книг».
«На сегодняшний день искусственный интеллект становится одним из важнейших технологических факторов трансформации видеопроизводства. Их применение в этой сфере требует использования эффективных методов промпт-инжиниринга в качестве системы рекомендаций по формированию запросов и инструкций, обеспечивающих достижение желаемого художественного результата. Разработка таких методов промпт-инжиниринга была технологическим вызовом, ответ на который искали участники хакатона», – председатель организационного комитета хакатона hackMOVIE 2023, старший научный сотрудник кафедры телевидения и видеотехники СПбГЭТУ «ЛЭТИ» Константин Францевич Гласман.
Абсолютным победителем хакатона hackMOVIE 2023 по уровню решения задач всех трех этапов, стал студент 2 курса магистратуры факультета информационно-измерительных и биотехнических систем (ФИБС) СПБГЭТУ «ЛЭТИ» Дмитрий Попов. Он являлся главным и единственным членом команды. Ему был вручен приз от имени директора ведущей российской компании «Корпорация DNK» Артема Богатырева.
Второе место заняла команда студентов 4 курса бакалавриата ФИБС СПБГЭТУ «ЛЭТИ» Светлана Шалимова, Алиса Баратова, Дарья Богданова, Инна Тарасевич и Савелий Швайко. Приз их команде вручил генеральный директор компании «Невафильм» и Высшей школы киноинженеров Олег Березин.
Третье место было присуждено научному сотруднику Института перспективных исследований мозга МГУ имени М.В. Ломоносова Виктору Плюснину, который также являлся единственным участником в своей команде. Он получил призы от президента кинопродюсерского центра «Silk Road Media» Григория Пельмана и от президента MPEG Industry Forum, почетного доктора и профессора СПбГИКиТ Себастьяна Моритца.
Значимость проведения данного хакатона отметила один из членов жюри, режиссер, сценарист, мастер курса режиссуры неигрового кино СПбГИКиТ Мария Поприцак. Она подчеркнула, что развитие искусственного интеллекта имеет огромное значение для будущего кинематографа.
«ИИ активно используется в кинематографе, помогая в создании цифровых персонажей, улучшении визуальных эффектов и даже в монтаже фильмов. Поэтому без сомнения, мы будем видеть рост востребованности тех специалистов, которые умеют общаться с нейросетью и получать нужный результат. Хакатон hackMOVIE в рамках конференции SPCN 2023 показал, насколько талантливы молодые люди, и как они могут применить новейшие технологии для создания потрясающих видео». – Мария Поприцак
Призерам в отдельных номинациях выданы награды и дипломы акселерационной программы «Стартапы LETI». В частности, все участники хакатона смогут пройти курс повышения квалификации «Основы проектной деятельности и технологического предпринимательства».
Проект реализован при поддержке федерального проекта «Платформа университетского технологического предпринимательства» в рамках «Стартапы LETI». Организаторами проекта выступили СПБГЭТУ «ЛЭТИ», Институт физиологии им. И.П. Павлова РАН, СПБГИКИТ, компания «Невафильм» и Высшая школа киноинженеров.