Google продемонстрировала VideoPoet – новый инструмент ИИ для создания видео. Эта нейросеть предназначена для выполнения ряда задач, включая преобразование текста в видео, изображение в видео, стилизацию видео, закрашивание видео, а также преобразование видео в аудио.

Особенности

VideoPoet может создавать различные типы видеороликов, включая короткометражные фильмы, музыкальные клипы и даже поясняющие видеоролики. VideoPoet основана на большой языковой модели (LLM), обученной на огромном наборе данных текстовых и видеоданных. Для обучения использовались 270 млн видео и более чем 1 млрд пар текста и изображения из Интернета и других источников.

В результате модель способна понимать взаимосвязь между текстом и видео и создавать связные и визуально привлекательные видеоролики. Google адаптировал VideoPoet для создания видео в портретной ориентации по умолчанию или «вертикального видео», которое используется в различных социальных сетях.

Одна из самых впечатляющих особенностей VideoPoet – это способность создавать длинные видеоролики. Модель может создавать видеоролики длительностью в несколько минут, объединяя короткие клипы. Это позволяет использовать VideoPoet для создания более сложных и тонких видеороликов. VideoPoet также можно использовать для редактирования существующих видео.

Например, можно использовать этот инструмент, чтобы добавить анимацию к статическому изображению или изменить стиль видео. Это делает VideoPoet мощным инструментом для редактирования видео даже для людей, не имеющих большого опыта.

Доступность

На данный момент VideoPoet ещё не доступен в качестве коммерческого продукта.

Подпишись вTelegram
Nintendo зарабатывает всего $4 с каждой проданной Switch 2

Nintendo зарабатывает всего $4 с каждой проданной Switch 2

Телевизор Samsung Q8F получил QLED-экран с частотой обновления до 144 Гц

Телевизор Samsung Q8F получил QLED-экран с частотой обновления до 144 Гц

До 30% кода в Microsoft пишет ИИ

До 30% кода в Microsoft пишет ИИ

ESR MagMouse – мышь с магнитным креплением на ноутбук за $36

ESR MagMouse – мышь с магнитным креплением на ноутбук за $36

Lenovo выпустила мощный мини-ПК с Intel Core Ultra 200 и RTX 5060

Lenovo выпустила мощный мини-ПК с Intel Core Ultra 200 и RTX 5060

Nothing выпустила смартфон CMF Phone 2 Pro

Nothing выпустила смартфон CMF Phone 2 Pro

Роутер ASUS RT-BE82U с Wi-Fi 7 и поддержкой AiMesh оценён в $206

Роутер ASUS RT-BE82U с Wi-Fi 7 и поддержкой AiMesh оценён в $206

Представлены iQOO Z10 Turbo и Turbo Pro – 7000 мАч и зарядка 120 Вт

Представлены iQOO Z10 Turbo и Turbo Pro – 7000 мАч и зарядка 120 Вт

Nubia выпустила камерофон Z70S Ultra Photographer Edition

Nubia выпустила камерофон Z70S Ultra Photographer Edition

Представлен планшет Nubia Pad Pro на Snapdragon 8 Gen 3

Представлен планшет Nubia Pad Pro на Snapdragon 8 Gen 3

Anker Nebula X1 – портативный 4K-проектор

Anker Nebula X1 – портативный 4K-проектор

Motorola выпустила беспроводные наушники Buds Loop

Motorola выпустила беспроводные наушники Buds Loop