Framy 1.5 — генерация видео выходит на новый уровень

Модель Framy обновилась до версии 1.5, и это не косметический патч, а серьёзный апгрейд движка.

Что нового

Качество картинки

Перестроено латентное пространство с обновлённым VAE, обученным на данных более высокого качества. На практике это означает: волосы наконец выглядят как волосы, текст читается, а мелкие детали лица не расплываются в кашу. Визуальных артефактов стало ощутимо меньше.

Звук «из коробки»

Framy 1.5 генерирует синхронизированное аудио за один проход — диалоги, эмбиент, звуковые эффекты. Обновлённый вокодер повысил разборчивость речи, а кросс-модальное выравнивание уменьшило рассинхрон губ и тайминга.

Движение и консистентность

Режим image-to-video заметно подтянули: меньше «замёрзших» кадров, меньше спонтанных панорамирований, лучше сохраняется визуальная целостность исходного изображения.

Нативное вертикальное видео

Впервые поддерживается вертикальная генерация до 1080×1920 — модель обучена на портретных данных, а не кропает из ландшафта. Reels и Shorts теперь можно кормить напрямую.

Текстовый энкодер увеличен в 4 раза — модель стала значительно лучше понимать сложные промпты с описанием ракурсов камеры, движений персонажей и композиции сцены.

Улучшатель промптов

Отдельный бонус — добавили мощный улучшатель промптов. Он помогает превратить сырой запрос в более точное и выразительное описание сцены: аккуратно докручивает движения, ракурсы, реплики и атмосферу, чтобы итоговое видео чаще попадало в задумку с первой попытки.

Короче говоря, Framy 1.5 — это тот случай, когда номер версии скромничает.