Компания Alibaba представила технологию Live Avatar для создания интерактивных аватаров в реальном времени. Она основана на диффузионной ИИ-модели с 14 миллиардами параметров и поддерживает потоковую генерацию видео с частотой 20 кадров в секунду. Для работы Live Avatar требуется пять графических процессоров H800, которые обеспечивают четырехступенчатую дискретизацию.
Пользователи могут взаимодействовать с аватарами через микрофоны и камеры, общаясь в режиме реального времени. Среди возможных сценариев использования — прямые онлайн-трансляции, интерактивные игры, образовательные платформы и создание виртуальных спутников.
Функция стриминга позволяет использовать Live Avatar для различных видов интерактивного видео и общения. Технология открывает новые возможности для создания персонализированного опыта в сети.
Сейчас для запуска Live Avatar требуется мощное оборудование, но Alibaba планирует дальнейшую оптимизацию. Проект доступен на GitHub для разработчиков, которые хотят попробовать новую технологию.
