“MagicTime: ИИ превращает текст в реалистичное видео”

🚀 Ученые совершили прорыв в создании реалистичных видео с помощью ИИ! Новая модель MagicTime учится на таймлапс-роликах, чтобы точнее моделировать физические процессы в мире. Разработка объединила специалистов из Университета Рочестера, Пекинского университета и других ведущих научных центров.

🌱 Ранние ИИ-модели (например, Sora от OpenAI) плохо справлялись с видео, где объекты трансформируются — например, показывали рост растений или строительство зданий. Проблема в том, что такие процессы требуют глубокого понимания физики и химии, а их вариативность огромна.

💡 MagicTime решает эту задачу! Модель обучалась на 2000+ таймлапс-роликов с детальными описаниями. Сейчас она генерирует короткие клипы (2–10 секунд), демонстрирующие:

  • Биологическую трансформацию (рост цветов, деревьев),

  • Строительные процессы,

  • Приготовление еды (например, выпечку).

🧠 «MagicTime — шаг к ИИ, который сможет точнее моделировать физические, химические и биологические процессы реального мира», — объясняет Джинфа Хуан, соавтор исследования из Университета Рочестера.

🔬 Хотя текущие результаты впечатляют, ученые видят в этом лишь начало. В будущем такие модели могут ускорить научные исследования:

  • Биологи смогут тестировать гипотезы виртуально,

  • Сократится количество дорогостоящих экспериментов,

  • ИИ станет инструментом для предварительного анализа.

🌍 «Точное моделирование сократит циклы проверки идей, хотя реальные эксперименты останутся ключевыми», — добавляет Хуан.

Исследование опубликовано в журнале IEEE Transactions on Pattern Analysis and Machine Intelligence.

Источник

Оставьте комментарий