Для генерации видеоролика достаточно ввести текстовое описание. Кроме того, с помощью решения Google можно обрабатывать готовый материал.
Нейросети на пике популярности. С их помощью пишут дипломы, создают готовые изображения, накладывают спецэффекты на видео и даже подделывают голоса давно умерших вокалистов. Не так давно компания Google представила VideoPoet — новое решение на рынке ИИ, которое может изменить представление пользователей о возможностях современных технологий.
VideoPoet позволяет создавать видеоролики на основе текстового описания. По словам Google, в основе проекта лежит большая языковая модель (LLM). Аналогичное решение применяется ChatGPT. Для обучения нейросети специалисты использовали более 270 млн видеороликов плюс более миллиарда текстов и графических изображений, объединенных в пары.
Как результат, новая нейросеть умеет имитировать большое число визуальных стилей, позволяет точно работать с камерой и даже генерировать аудио на основе ролика. Не обошлось и без популярного нынче «вертикального» формата, пригодного для использования в различных социальных сетях.
В настоящий момент решение Google еще не было поставлено на коммерческие рельсы. Срок «большого» запуска VideoPoet не называется. Зато прямо сейчас можно прочесть о том, что нейросети не устояли перед теорией плоской Земли.