Одна картинка — и твой персонаж разговаривает вживую

Смотри, идея на одну строку: берёшь рисунок дракончика — хоть детский, фломастером — и он оживает на экране. Моргает, улыбается, шевелит губами в такт словам. Ребёнок спрашивает: «А ты умеешь летать?» — и дракончик отвечает голосом, глядя на него. Не заготовленный мультик. Живой разговор.

И тут самое интересное — раньше это была работа студии. Говорящий персонаж означал аниматоров, ручной липсинк и игровой движок. Весной Runway показала Characters: реалтайм-видеоперсонажа из одной картинки — 24 кадра в секунду, мимика и липсинк, ответ через пару секунд. А 8 июля открыла Runway Dev — платформу, где эта штука доступна через API любому. Одна картинка. Никакого обучения модели. Стиль любой: фото, мультяшный рисунок, маскот.

Почему именно это

Это чистый вау-момент. Рисунок, который висел на холодильнике, начинает разговаривать с автором — такое запоминается на всю жизнь. И этим хочется делиться: видео «мой дракончик отвечает на вопросы» само просится в семейный чат.

И это личное. Не готовый персонаж из чужого мультика, а твой: твой рисунок, твой голос для него, твои правила. Ты решаешь, кто он, что знает и как шутит.

Чему научишься

• Картинка как параметр. Ты увидишь, что персонаж целиком задаётся одной картинкой — стиль, внешность, характер лица. Поменял картинку — поменял героя.
• Персонаж = картинка + голос + инструкция. Ты соберёшь героя из трёх деталей и поймёшь, как устроены все «живые аватары» — от репетиторов до персонажей поддержки.
• Роль текстом. Кто ты, как говоришь с ребёнком, о чём молчишь — всё это одна инструкция. Тот же системный промпт, только результат смотрит на тебя и моргает.
• Реалтайм. Ты почувствуешь, почему пара секунд задержки — это «живой разговор», а десять — уже нет. Это ключевое ограничение всех голосовых интерфейсов.

Готовый стартовый промпт

Не пиши «будь весёлым дракончиком» — герой будет болтать без характера и границ. Опиши роль целиком:

Сильный промпт делает из «говорящей головы» персонажа: с возрастом, характером, любимыми темами и запретами. Строчка «короткие ответы в 2–3 предложения» особенно важна — живой герой, который читает лекции, перестаёт быть живым.

Что в итоге

На экране — тот самый дракончик с рисунка. Ребёнок говорит «привет!» — дракончик оживляется, улыбается и здоровается в ответ, губы двигаются в такт. Вопрос про китов — короткий весёлый ответ и встречный вопрос. Ты снимаешь минуту этого разговора на телефон, отправляешь в семейный чат — и полчаса отвечаешь на «КАК?!».

Начни с одного героя и короткой роли. Заработает — оживишь всю галерею с холодильника: у каждого рисунка свой голос и характер.

Источник: Introducing Runway Dev (Runway)