Google продемонстрировала VideoPoet – новый инструмент ИИ для создания видео. Эта нейросеть предназначена для выполнения ряда задач, включая преобразование текста в видео, изображение в видео, стилизацию видео, закрашивание видео, а также преобразование видео в аудио.

Особенности

VideoPoet может создавать различные типы видеороликов, включая короткометражные фильмы, музыкальные клипы и даже поясняющие видеоролики. VideoPoet основана на большой языковой модели (LLM), обученной на огромном наборе данных текстовых и видеоданных. Для обучения использовались 270 млн видео и более чем 1 млрд пар текста и изображения из Интернета и других источников.

В результате модель способна понимать взаимосвязь между текстом и видео и создавать связные и визуально привлекательные видеоролики. Google адаптировал VideoPoet для создания видео в портретной ориентации по умолчанию или «вертикального видео», которое используется в различных социальных сетях.

Одна из самых впечатляющих особенностей VideoPoet – это способность создавать длинные видеоролики. Модель может создавать видеоролики длительностью в несколько минут, объединяя короткие клипы. Это позволяет использовать VideoPoet для создания более сложных и тонких видеороликов. VideoPoet также можно использовать для редактирования существующих видео.

Например, можно использовать этот инструмент, чтобы добавить анимацию к статическому изображению или изменить стиль видео. Это делает VideoPoet мощным инструментом для редактирования видео даже для людей, не имеющих большого опыта.

Доступность

На данный момент VideoPoet ещё не доступен в качестве коммерческого продукта.

Подпишись вTelegram
NVIDIA RTX 50xx – характеристики и график выхода видеокарт

NVIDIA RTX 50xx – характеристики и график выхода видеокарт

Gigabyte представила 4K и 2K QD-OLED мониторы

Gigabyte представила 4K и 2K QD-OLED мониторы

Realme GT Neo 7 получит батарею на 7000 мАч

Realme GT Neo 7 получит батарею на 7000 мАч

Камера iPhone 16 заняла 20-е место в рейтинге DxOMark

Камера iPhone 16 заняла 20-е место в рейтинге DxOMark

Планшет OPPO Pad 3 Pro вышел на глобальный рынок  – Snapdragon 8 Gen 3, 144 Гц и 12 ГБ ОЗУ

Планшет OPPO Pad 3 Pro вышел на глобальный рынок – Snapdragon 8 Gen 3, 144 Гц и 12 ГБ ОЗУ

Представлена Sony Alpha 1 II – беззеркальная камера за $6500

Представлена Sony Alpha 1 II – беззеркальная камера за $6500

Представлен Nubia Z70 Ultra – фотофлагман на Snapdragon 8 Elite

Представлен Nubia Z70 Ultra – фотофлагман на Snapdragon 8 Elite

Представлен Redmi A4 5G – 120 Гц, Snapdragon 4s Gen 2 и цена $101

Представлен Redmi A4 5G – 120 Гц, Snapdragon 4s Gen 2 и цена $101

Microsoft выпустила мини-ПК Windows 365 Link, напоминающий Mac mini

Microsoft выпустила мини-ПК Windows 365 Link, напоминающий Mac mini

Valve разрабатывает Steam Controller 2 и геймпад для VR-гарнитуры

Valve разрабатывает Steam Controller 2 и геймпад для VR-гарнитуры

Apple выпустила iOS 18.1.1

Apple выпустила iOS 18.1.1

MacBook Pro на M4 Max протестировали в играх

MacBook Pro на M4 Max протестировали в играх