Штучний інтелект створює ролики за текстовими запитами та анімує статичні зображення. Розробники відверто тішаться своїм дітищем.
Як повідомляється на сайті проєкту, нейромережа Lumiere може створювати ролики завдовжки до 5 секунд на основі текстових підказок. Новинка стала можливою завдяки архітектурі, що дозволяє прораховувати не окремі зображення, а все відео цілком і повністю.
Технологічна розробка відрізняється від більшості наявних генеративних моделей для створення роликів: спочатку робляться ключові кадри, а потім заповнюються проміжки між ними. Крім обробки текстових запитів, мережа Lumiere вміє переводити статичні зображення у динамічні.
Інноваційний проєкт також може скопіювати стиль інших відео та відредагувати існуючі ролики; змінити можна певні деталі, наприклад, одяг персонажів або колір тла. Нейромережа, навчена на основі понад 30 мільйонів відеороликів, поки що недоступна для публіки.
Також медіаагенція «Останній Бастіон» нагадує своїм читачам про те, як колишній генеральний директор корпорації «Google» Ерік Шмідт розробляє стелс-безпілотник. На таке рішення його надихнули українські дрони.