С помощью нейросети Яндекса в Шедевруме теперь можно генерировать короткие видеоролики
По текстовому описанию
Яндекс запустил генерацию видеороликов в приложении Шедеврум — по текстовому запросу пользователя нейросеть создаст видео длиной четыре секунды с частотой 24 кадра в секунду. После публикации им можно поделиться с друзьями или сохранить в формате MP4. Сейчас функция работает в режиме тестирования и доступна только активным пользователям Шедеврума. Посмотреть результаты в ленте, при этом, могут все.
Чтобы создать нужное видео, необходимо сформулировать наиболее точное текстовое описание. Шедеврум предоставляет четыре варианта для первого кадра и набор анимационных эффектов, таких как приближение, таймлапс, полет, панорама, вращение, подъем и постепенное изменение. Затем нейросеть генерирует оставшиеся кадры и объединяет их с нужным эффектом.
«Для создания кадров будущего видео используется метод каскадной диффузии. С помощью этой технологии Шедеврум генерирует отдельные изображения. Сначала нейросеть создаёт картинки в соответствии с запросом, а затем поэтапно увеличивает их разрешение, насыщая деталями».
Ранее Яндекс добавил в Шедеврум нейросеть YandexGPT. Пользователи могут не только сгенерировать изображение, но и получить к нему содержательный текст.
Источник: Яндекс