Alibaba начал работу над ИИ-генератором видео Tora


Китайский технологический гигант Alibaba работает над Tora — инструментом для генерации видео на основе Sora. Об этом сообщает SCMP.
Его разрабатывают на базе архитектуры Diffusion Transformer (DiT), лежащей в основе представленной в феврале нейросети OpenAI.
Газета отмечает, что эксперты создали «ориентированный на траекторию DiT-фреймворк для генерации видео». Это означает, что создаваемые Tora движения точно следуют заданной траектории, воспроизводя динамику физического мира.
«Мы адаптировали рабочий процесс OpenSora для преобразования необработанных видео в пары видео-текст высокого качества и использовали оптический оценщик потока для выделения траектории», — сказали они.
Неизвестно, когда новый инструмент станет доступен для широкой публики. Ранее другие китайские компании представили собственные генераторы видео на основе ИИ.

Рассылки ForkLog: держите руку на пульсе биткоин-индустрии!
24 июля модель Kling от Kuaishou стала доступна во всем мире. Позже стартап Zhipu представил свое решение — Ying.
В августе принадлежащая китайскому гиганту ByteDance (владеет TikTok) фирма Faceu Technology запустила нейросеть Jimeng AI для генерации видео из промптов.
Напомним, в феврале OpenAI представила новую генеративную модель искусственного интеллекта Sora, которая позволяет преобразовывать текст в видео.
В июне компания Toys «R» Us столкнулась с волной критики после выпуска рекламы, полностью созданной с использованием инструмента от OpenAI.