Google запускает генеративный искусственный интеллект Lumiere для создания реалистичных изображений и видео на основе текстовых подсказок

Google только что запустил Lumiere, новый генеративный инструмент искусственного интеллекта, который поможет вам создавать более реалистичные изображения и видео с помощью текстовых команд. Одной из замечательных особенностей Люмьера является его способность воспроизводить реалистичные движения без каких-либо заиканий. Это возможно, потому что программное обеспечение создает все видеокадры одновременно, вместо того, чтобы сначала использовать ключевые кадры, а затем обучать их, чтобы узнать, как должно происходить действие.

Возможно, это звучит не впечатляюще, но с помощью новейших инструментов генеративного искусственного интеллекта мы можем пойти дальше и создавать удивительные произведения.

Люмьер также использует модели вероятности диффузии для создания изображений. Это сочетается с пространственно-временной U-Net. Для тех, кто не знает, U-Net — это архитектура, которая обеспечивает временное увеличение и уменьшение масштаба, а также добавление блоков внимания к изображению. Самое приятное то, что этот новый инструмент генеративного искусственного интеллекта можно использовать со многими другими моделями, что поможет создавать изображения и видео, более реалистичные, чем все, что мы видели раньше.