AI-фильм выходит в кинотеатрах, а Flux 3 уже здесь

Компания Black Forest Labs выпустила Flux 3 — долгожданную модель генерации видео, анонсированную еще во время запуска Flux 1 в августе 2024 года. Эта новая итерация значительно расширяет творческие возможности, увеличивая стандартный лимит генерации видео до 20 секунд. Увеличенная длительность напрямую отвечает ключевому запросу пользователей, позволяя выйти за рамки 10-секундных роликов, типичных для многих ранних инструментов генерации видео на базе ИИ.

Flux 3 функционирует как мощная мультимодальная модель, принимающая разнообразные входные данные для реализации сложных творческих процессов. Пользователи могут интегрировать до 10 референсов, комбинируя статические изображения, аудиодорожки или существующие фрагменты видео. Эта мощная функция позволяет выполнять сложный монтаж, продвинутый ремиксинг и точный контроль над генерируемым контентом, оптимизируя сложные производственные задачи.

В настоящее время Flux 3 генерирует видео в разрешении 720p, при этом Black Forest Labs планирует внедрение 1080p в ближайшем будущем. Модель предлагает полную поддержку всех стандартных соотношений сторон, от вертикального 9:16 до кинематографического 21:9, обеспечивая адаптивность для различных платформ. Важно отметить, что Flux 3 также включает встроенную генерацию аудио, создавая синхронизированные звуковые ландшафты вместе с визуальным рядом.

Flux 3 работает как рассуждающая видеомодель (reasoning video model), демонстрируя продвинутую когерентность промптов. Модель успешно выполняет сложные нарративные запросы, создавая результаты, которые сохраняют последовательные сюжетные элементы и действия персонажей на протяжении всего 20-секундного лимита генерации. Эта возможность позволяет создавать более сложные истории непосредственно из текстовых промптов.

Ее производительность контрастирует с моделями, оптимизированными для быстрой визуальной динамики. Flux 3 не отдает приоритет «гипер-поп кинетической энергии» или быстрым сценам с резкими движениями камеры и трюками, которые характерны для некоторых конкурирующих решений. Вместо этого она превосходно справляется с созданием драматических сцен, особенно тех, где присутствует обширный, быстрый диалог — качество, которое, как отмечается, превосходит темп сериала «Девочки Гилмор».

Black Forest Labs позиционирует Flux 3 как инструмент дополнения для профессиональных рабочих процессов, а не как полную замену устоявшимся решениям, таким как C-dance. Компания подтвердила планы по будущему выпуску открытых весов (open weights) модели, что будет способствовать более широкой интеграции и кастомизации. Ожидается, что стоимость генерации будет ниже, чем у текущих рыночных альтернатив, что повысит доступность для создателей контента.

Зак Лондон, известный как Gossip Goblin, отметил важную веху в индустрии выходом в кинотеатральный прокат своего полнометражного фильма, созданного с помощью ИИ. Это событие представляет собой самое значительное достижение в области дистрибуции для кино, созданного на базе ИИ, переводя технологию из экспериментальных онлайн-показов в мейнстримный прокат. Это утверждает Лондона как значимую фигуру в развивающемся ландшафте цифрового кинопроизводства.

Успех Лондона подчеркивает растущую тенденцию, когда инициативы авторов используют инструменты генеративного ИИ для создания полнометражных нарративных произведений. Это развитие создает жизнеспособный путь для независимых кинематографистов к традиционной дистрибуции, доказывая, что контент, созданный ИИ, может соответствовать требованиям качества и сторителлинга коммерческой киноиндустрии. Это бросает вызов устоявшимся представлениям об ограничениях искусства, созданного машинами.

Театральный прокат фильма, созданного с помощью ИИ, подтверждает способность технологии к построению сложных нарративов. Чтобы понять качество повествования, которого можно достичь, 30-минутный короткометражный фильм London под названием «Pomegranate» служит убедительным примером. Эта короткометражка демонстрирует глубокое повествование и развитие персонажей, указывая на потенциал создания полноценных кинематографических произведений с использованием современных моделей ИИ; дополнительные технические характеристики передовых моделей генерации видео, таких как Flux 3, доступны по ссылке FLUX 3 - Real World Models: Towards Multimodal Flow Models as the Backbone of Visual Intelligence. | Black Forest Labs.

Zach London, известный как Gossip Goblin, применил строго контролируемый двухэтапный процесс для своего полнометражного фильма, созданного с помощью ИИ, который недавно вышел в кинотеатральный прокат. Базовый этап включал начальную генерацию изображений, тщательно выполненную в Midjourney. Этот критически важный первый шаг использовал специфические коды персонализации и S-ref, закладывая точную визуальную основу для каждой сцены.

После создания изображений London принял ключевое решение в рабочем процессе: эксклюзивное использование преобразования первого кадра изображения в видео (first-frame image-to-video). Эта стратегия заключалась в подаче только одного заранее разработанного изображения в модель генерации видео для каждой последовательности. Примечательно, что такой подход полностью исключал использование нескольких референсов — распространенную практику, при которой несколько изображений или видеоклипов направляют результат работы ИИ.

Обоснование London для этого строгого метода заключалось в сохранении абсолютного творческого контроля. Ограничивая использование ИИ только начальным статичным кадром, он осуществлял точное управление последующей анимационной последовательностью. Это позволило задавать очень специфическое направление движения камеры, кадрирование и композицию кадра, гарантируя, что итоговое визуальное повествование строго соответствует его художественному видению. Этот отход от более автоматизированных методов с использованием нескольких референсов подчеркнул приверженность режиссерскому контролю в создании фильмов с помощью ИИ.

Что такое Flux 3 от Black Forest Labs?

Flux 3 — это новая мультимодальная модель генерации видео на базе ИИ, способная создавать клипы длительностью до 20 секунд. Она принимает референсы в виде изображений, аудио или видео и генерирует собственный звук.

В чем значимость фильма Gossip Goblin?

Фильм Zach London (Gossip Goblin) значим тем, что это полнометражный фильм, созданный с помощью ИИ, который получил театральный прокат, что стало важной вехой в кинопроизводстве с использованием ИИ.

Что уникального в рабочем процессе создания фильма Gossip Goblin с помощью ИИ?

Его рабочий процесс начинается с генерации изображений в Midjourney, а затем использует генерацию видео из первого кадра. Это позволяет избежать использования нескольких референсов для сохранения точного контроля над камерой.

Ожидается ли, что Flux 3 заменит такие модели, как C-dance?

Изначально Flux 3 позиционируется как инструмент, который может дополнить существующие рабочие процессы, а не заменить их. Он отлично справляется с согласованностью промптов для драматических сцен, но может быть менее пригоден для гиперкинетического экшена.