Що за Runway ML Gen-3 Alpha
Насправді це назва складова: Runway ML — нейромережа; Gen-3 Alpha — її нова модель, яка стала загальнодоступною в серпні. Щоправда, з обмеженнями, але про це згодом.
Сама нейронка була відома задовго до анонсу Sora AI як одна з найбільш сучасних серед генераторів відео. Третє покоління моделі стало найтехнологічнішим. Тут важливо відзначити, що існують дві його версії:
- Gen-3 Alpha — Повноцінна модель, що дозволяє генерувати відео за картинкою та за текстовим описом. Її помітно донавчили порівняно з попередньою версією, Gen-2, що дозволило покращити точність, консистентність та динаміку рухів. Доступна лише з передплатою.
- Gen-3 Alpha Turbo — урізана версія з можливістю генерувати відео лише на основі готових зображень — Image to Video. Її можна тестувати безкоштовно, хай і з обмеженнями.
Також користувачам доступна модель Gen-2 – попереднє покоління з менш вражаючою якістю генерації. Її цікаво помацати хіба що задля порівняння з більш просунутою Gen-3 Alpha.
Як отримати доступ до нейромережі
Достатньо перейти на офіційний сайт Runway ML. Він відкривається для користувачів з Росії без будь-яких хитрощів.
Для початку роботи доведеться завести обліковий запис. Це можна зробити через електронну пошту або використовувати облікові записи Apple або Google.
Як генерувати відео в Runway ML Gen 3
Як ми вже згадували, безкоштовна модель Gen-3 Alpha Turbo працює тільки за картинкою-вихідником. По суті, ви завантажуєте перший кадр і кажете нейромережі, що робити далі. Або можна просто дати їй картинку та надати повну свободу дій.
Щоб розпочати, відкрийте редактор Runway ML. За замовчуванням він вибирає Gen-3 Alpha Turbo як найновішу модель.
Завантажте зображення у верхній лівий розділ редактора. Можна натиснути на нього, щоб відкрити провідник, або відразу перетягнути картинку в поле для завантаження. Якщо хочете, щоб цей кадр став не першим, а останнім, натисніть кнопку Last під зображенням.
У полі нижче розпишіть дію, яку бажаєте побачити у готовому ролику. Це може бути як простий сюжет, наприклад A man playing with puppy, так і складний промпт, що включає деталі руху персонажів та камери. Запит краще писати англійською.
Якщо залишити поле порожнім, нейромережа додумає дію сама. Зазвичай навіть самий базовий промпт дає більш адекватний результат, ніж отсебятина ІІ.
Під віконцем введення промпту пропонуються різні пресети. По суті, це текстові підказки, які додають у ваш запит ланцюжок слів і дозволяють досягти заявленого ефекту — від динамічного екшену до слоу-мо та режиму від першої особи.
Щоб подивитися всі варіанти, потрібно натиснути кнопку Custom Presets на лівій панелі, під іконкою Т. У вкладці Custom можна створити власні пресети — якщо знайшли хороше поєднання ключових слів, яке дає вам результат.
Якщо натиснути на іконку налаштувань, відкриється мізерний набір опцій. Безкоштовно можна хіба що закріпити сид — це ланцюжок цифр, який допомагає нейронці посилатися на якусь генерацію та її параметри. Опція стане в нагоді, якщо раніше ви згенерували дуже вдалий ролик і хочете зробити новий в тому ж стилі.
Відключити водяний знак Runway на відео можна лише з підпискою. Інших налаштувань немає.
Швидкість генерації виправдовує Turbo у назві: створення відео зазвичай йдуть лічені секунди, черги поки мінімальні. Ролик можна подивитися у вбудованому плеєрі, завантажити на пристрій та оцінити якість роботи нейромережі.
Іноді доводиться пробувати кілька разів, але отримати добрий результат нескладно. Ось тут, наприклад, ми попросили показати, що «чоловік і жінка йдуть уперед загрозливо» (ховати другий пістолет у Нео не просили, це безкоштовний бонус):
А тут — побажали додати Тайлеру Дьордену бенгальські вогні:
Також під готовим відео з'являється кнопка Lip Sync. Якщо натиснути на неї, нейромережа проаналізує обличчя людини в кадрі (якщо вона там є, зрозуміло) і підготується до накладання голосу із синхронізацією руху губ.
Можна озвучити текст або використовувати голосове введення — наговорити потрібні фрази самостійно або підвантажити готовий аудіофайл. Якщо вихідний текст — текст, можна також вибрати голос.
Якщо цікаво згенерувати відео без картинки, доведеться знизити модель до Gen-2. Вона більше дивує з рухами та переходами, ніж третя версія, проте доступна на безкоштовних акаунтах.
Скільки це коштує
Доступ до Gen-3 Alpha Turbo надається безкоштовно, але тільки в обсязі, достатньому для тестування. При реєстрації кожен обліковий запис отримує 125 кредитів генерації, які витрачаються на створення роликів. Якщо зареєструватися під час тестування нової моделі, наприклад, Gen-3 Alpha Turbo, зверху дадуть ще 400 кредитів.
Кожна секунда генерації з Gen-3 Alpha Turbo або Gen-2 знімає 5 кредитів, тому початковий бонус витрачається дуже швидко. А враховуючи, що кредити не поповнюються, доведеться платити або реєструвати новий акаунт.
Gen-3 Alpha доступна лише за підпискою, безкоштовних опцій немає.
Ціни на передплату стартують від 15 доларів на місяць: за розблокування всіх функцій та 625 кредитів зверху. Максимальна вартість – 95 доларів на місяць: за безлімітні генерації з будь-якою моделлю та 2 250 кредитів на додаткові функції на кшталт Lip Sync.