Adobe випустила свій генератор штучного інтелекту для перетворення тексту та зображень на відео для загального користування. Інструмент, названий Generate Video, наразі перебуває у відкритій бета-версії, після обмеженого етапу раннього доступу, що відбувся минулого року. Користувачі можуть отримати доступ до бета-інструменту через оновлений веб-додаток Firefly, який також представляє нові функції генерації зображень, перекладу та підписки на кредити штучного інтелекту, спрямовані на творців. Запущений у жовтні, Adobe спочатку представила інструменти на основі свого генеративного штучного інтелекту Firefly Video Model, починаючи з бета-версії інструмента Generative Extend для Premiere Pro, який призначений для подовження відеозаписів на початку або в кінці. Сьогоднішнє представлення інструменту Generate Video відбулося більше ніж через два місяці після анонсу Sora від OpenAI. Цей новий інструмент має незначні вдосконалення з моменту його попереднього перегляду в вересні. Інструмент Generate Video має два основних компоненти: Text-to-Video та Image-to-Video. Функція Text-to-Video дозволяє користувачам створювати відео на основі текстових описів, тоді як функція Image-to-Video дозволяє користувачам включати референсне зображення для формування ідей для відео. Інструмент надає різноманітні варіанти для уточнення виходу, включаючи налаштування стилю, кута камери, руху та відстані зйомки. Відео виробляються у роздільній здатності 1080p з частотою 24 кадри на секунду, що є значним поліпшенням від початкової якості 720p. Процеси Text-to-Video та Image-to-Video займають 90 секунд або більше для генерації кліпів, які можуть тривати до п’яти секунд — це коротше, ніж 20-секундні кліпи, що пропонуються Sora. Adobe також працює над швидшою, менш якісною "моделлю ідеації" та майбутньою версією 4K, які обидві мають бути запущені найближчим часом. Веб-додаток Firefly, який містить багато згенерованих AI інструментів від Adobe, отримав оновлений дизайн і тепер інтегрується з додатками Creative Cloud, такими як Photoshop, Premiere Pro та Express, спрощуючи переміщення та редагування активів, згенерованих штучним інтелектом.

Важливо, що Firefly навчено на матеріалах з публічної доменної та ліцензованої власності, що робить його придатним для комерційного використання. Adobe позиціонує інструмент Generate Video як "придатний для виробництва", що приваблює кінематографістів, які прагнуть включити контент, створений штучним інтелектом, без порушення авторських прав. Оскільки Adobe входить у конкурентне середовище в секторі AI-відео, вона стикається з викликами від конкурентів, таких як Sora, яка нещодавно була запущена, та Google, що тестує в бета-версії свою модель відео Veo AI нового покоління — вважається, що ця модель є покращенням над існуючою пропозицією OpenAI на основі ранніх демонстрацій. Такі компанії, як ByteDance та Pika Labs, також представили нові інструменти генеративного штучного інтелекту для відео. Хоча основна перевага Adobe полягає в комерційній применимості Firefly, їй потрібно продовжувати вдосконалювати якість і функції, доступні проти своїх конкурентів. Крім того, веб-додаток Firefly тепер пропонує ще два інструменти в публічній бета-версії, хоча вони потребують оплати. Scene to Image дозволяє користувачам створювати користувацькі референції для зображень, згенерованих AI, використовуючи вбудовані функції 3D та ескізування — що виходить з раннього експерименту "Project Scenic", анонсованого в жовтні. Інструмент Translate Audio and Video дозволяє користувачам перекладати та дублювати аудіо більше ніж на 20 мов, зберігаючи голос оригінального спікера. Adobe запускає два нові підписні плани для Firefly, які надають кредити для використання своїх моделей. Стандартний план Firefly починається з 9. 99 доларів на місяць і пропонує 2000 кредитів на відео/аудіо для до 20 п’ятисекундних відео, згенерованих у 1080p. Більш дорогий план Firefly Pro доступний починаючи з 29. 99 доларів за 7000 кредитів, дозволяючи до 70 п’ятисекундних генерованих у 1080p відео. Значною перевагою обох планів є те, що вони надають необмежений доступ до можливостей зображення та векторної графіки Firefly.