Компания Luma AI представила новую генеративную модель Ray2, которая теперь доступна на платформе Dream Machine для платных подписчиков. Это обновление позволяет генерировать высококачественные реалистичные видео из текстовых запросов за считанные секунды. Сначала модель ориентирована на текстовые запросы, но в будущем планируются функции преобразования изображений в видео, видео в видео, а также редактирование.
Introducing Ray2, a new frontier in video generative models. Scaled to 10x compute, #Ray2 creates realistic videos with natural and coherent motion, unlocking new freedoms of creative expression and visual storytelling. Available now. Learn more https://t.co/jGI6KmRQpR. pic.twitter.com/i9PYlatlPv
— Luma AI (@LumaLabsAI) January 15, 2025
Ray2 использует архитектуру мультимодального трансформера, обученную на видеоданных, позволяя создавать визуально согласованные и динамичные клипы длительностью от пяти до десяти секунд. Основные возможности модели включают в себя естественное движение, обеспечивающее плавные переходы и улучшенную кинематографию. Пользователи могут давать детальные текстовые запросы для достижения точных визуальных результатов, таких как «человек бежит через снег с взрывами» или «руки нарезают стейк с паром, который поднимается».
Модель Ray2 доступна для платных подписчиков Dream Machine, а компания Luma AI планирует интегрировать ее в платформу Amazon AWS Bedrock, расширяя доступ для разработчиков и бизнеса. Это позволяет привлечь широкую аудиторию, включая создателей контента, маркетологов и профессионалов в областях игр, развлечений и электронной коммерции.
