Adobe запустила власну ШІ-модель для генерації відео — Firefly Video Model

15 жовтня, 2024, 15:00 625
Adobe запустила власну ШІ-модель для генерації відео — Firefly Video Model

Adobe розширила сімейство ШІ-моделей Firefly, яке вже включає Image Model, Vector Model and Design Model. Тепер запускають нову модель для генерації відео — Firefly Video Model. Про це компанія пише у своєму блозі.

Adobe називає її «першою загальнодоступною відеомоделлю, розробленою для безпечного комерційного використання». Поки що вона доступна в обмеженій публічній бета-версії, щоб отримати перші відгуки від невеликої групи професіоналів. Потім на їх основі модель допрацьовуватимуть.

Щоб скористатися Firefly Video Model першим, можна спробувати приєднатися до списку очікування. Відібраним користувачам прийде електронний лист-підтвердження та інструкції з використання.

Нова модель генерує п’ятисекундні ролики із роздільною здатністю 720p, які далі можна завантажені у форматі mp4. Вона може створювати 2D- і 3D-анімацію, графічні відео чи текстову графіку.

Adobe запевняє, що тренують Video Model на Adobe Stock і загальнодоступному вмісті, і не використовують для цього контент користувачів. Раніше Bloomberg повідомляв, що Firefly навчалася на згенерованих зображеннях Midjourney і конкурентів. Тобто вона теж містить дані творів із порушеним авторським правом.

На основі нової ШІ-моделі, додали низку функцій у відеоредактор Adobe Premiere Pro, які також поки що працюють в беті. Це:

  • Generative Extend — розширює кліпи, щоб заповнювати прогалини у відзнятому матеріалі, згладжує переходи або довше затримує кадри для ідеального хронометражу.
  • Text to Video та Image to Video — перетворює текст на відео (наприклад, для перебивок) та анімує фотографії.

Окрім цього, Adobe оновила й інші моделі сімейства Firefly. Раніше Adobe презентував ШІ, який може створювати музику.

Читати більше