Нейросеть для создания видео по тексту
Видео по сценарию: нейросеть делает ролик из текста
Вставьте сценарий, рассказ или несколько глав книги. Insaga прочитает текст как режиссёр: разобьёт на сцены, найдёт героев и места действия, один раз придумает их облик, нарисует и оживит каждый кадр, раздаст героям голоса и соберёт ролик на таймлайне с субтитрами.
100 кредитов бесплатно · без карты
Что происходит с вашим текстом: шаг за шагом
Видео по сценарию — это цепочка решений, которые обычно принимает съёмочная группа: где кончается сцена, кто в кадре, как он выглядит, кто какую реплику говорит. Нейросеть принимает их по вашему тексту, а вы вмешиваетесь там, где это дешевле всего: в героев — до первого кадра, в кадр — до анимации, в реплику — до озвучки.
Вставьте текст
Сценарий с заголовками сцен, рассказ, пьеса из одних диалогов или целый роман; если очень длинный текст не помещается в один проект, лимит для аккаунта поднимут. Затем выберите один из 100+ стилей — от стикмена и манги до масляной живописи — или свой стиль, собранный из ваших референсов (на старших тарифах), и формат кадра: 16:9 или кинематографичный 2,35:1.
Нейросеть делит текст на сцены
Текст читается как история, а не как список предложений. Insaga сама режет его на сцены и для каждой понимает, кто в ней участвует, где она происходит и что в ней меняется. Из этих ответов и складываются кадры.
Герои и локации получают облик
У каждого героя появляется лист персонажа: лицо, причёска, одежда и приметы, по которым его узнают. У каждого места, куда история возвращается, — свой облик. Это главный момент для правок: все следующие кадры рисуются по этим листам.
Лист локации из нуарной истории: дождливый переулок, пока без людей. Кадры рисуются, потом оживают
Insaga рисует каждый кадр с героями из листов и в выбранном стиле. Сначала вы смотрите картинки: неудачный кадр перерисовывается отдельно, остальные остаются как есть. Одобренные кадры оживают в видеоролики примерно по восемь секунд. Анимация — на тарифе Studio, где генерация картинок и анимации безлимитна.
Кадр из той же нуарной истории — до того, как он оживёт. Голоса расходятся по ролям
Нейросеть делит текст на реплики и определяет, кто что говорит. Каждому герою вы подбираете свой голос из 6 000+, рассказчику — ещё один. Если реплика досталась не тому, её переносят вручную, а герой, которому голос не выбран, звучит голосом рассказчика. Озвучка входит в платные тарифы.
Всё сходится на таймлайне
Кадры выкладываются на таймлайн и автоматически собираются под голос рассказчика. Добавьте автоматические субтитры в одном из 31 стиля, свою музыку, переходы и движения камеры и выгрузите MP4 вплоть до 4K. На тарифе Studio автопилот может пройти всю цепочку — от истории до готового файла — за один запуск.
Листы, по которым нарисованы кадры
Кадры на этой странице — из одной нуарной истории с четырьмя героями: женщина-детектив, певица ночного клуба, которая пропадает, мальчишка-газетчик и седой человек в белом костюме. Раньше, чем был нарисован первый кадр, разбор дал каждому лист персонажа, а переулку — лист локации из третьего шага.
Четыре листа персонажей
Детектив
Певица
Газетчик
Человек в белом
Сравните листы с кадрами выше: плащ, волны причёски, кепка и белый костюм не меняются ни в клубе, ни на лодке, ни на пирсе на рассвете. Эта устойчивость закладывается на этапе разбора, поэтому героев стоит довести до ума раньше, чем нарисован первый кадр.
Какой текст подходит и как нейросеть его читает
Insaga принимает обычный текст, особый формат не нужен. Но разные тексты дают нейросети разное количество материала.
- Сценарий
- Заголовки сцен, имена героев над репликами и короткие ремарки — самый понятный вход. Границы сцен видны сразу, у каждой реплики уже есть хозяин, а ремарки описывают то, что должна увидеть камера.
- Рассказ
- Подходит хорошо. Нейросеть сама делит прозу на сцены, раздаёт реплики тем, кто их говорит, остальное оставляет рассказчику, а описания уходят в листы героев и локаций.
- Главы книги
- Целую книгу можно вставить сразу; многие всё равно выпускают её сериалом: одна часть — одна серия. Чтобы в следующей серии были те же герои, загрузите их картинки из предыдущей.
- Текст на диалогах
- Пьеса, интервью, ссора на кухне. У каждого говорящего свой голос, так что сцена, построенная на разговоре, работает — если понятно, кто говорит.
- Только рассказчик
- История, тру-крайм, сказка вслух, познавательный ролик для YouTube. Один голос ведёт всё видео, а кадры показывают то, о чём он рассказывает.
- Синопсис или план
- Сработает, но из двух строк пересказа мало что нарисуешь, и нейросети придётся больше придумывать самой. Распишите подробнее сцены, которые для вас важнее всего.
Одна и та же сцена, написанная дважды
Было: «Ночью Аня боялась, но всё равно пошла к маяку».
Стало: «Ночь, ливень. АНЯ (12 лет, жёлтый дождевик, фонарик в руке) бежит по пирсу к маяку. У двери останавливается, оглядывается на чёрную воду и толкает дверь».
Во втором варианте у нейросети есть место, время суток, внешность героини и три действия, из которых получаются кадры. Первый вариант она тоже нарисует, но решать за вас ей придётся почти всё.
Как написать сценарий, чтобы видео получилось лучше
Одно имя на героя. Если капитан в тексте ещё и «старик», и «Эли», и «её дед», нейросеть может увидеть трёх разных людей. Выберите одно имя и держитесь его, а прозвища оставьте для реплик.
Опишите героя один раз — сразу и конкретно. «Высокая женщина в жёлтом пальто со шрамом над бровью» даёт листу персонажа за что зацепиться, «она была красива» — нет. Хватит одного точного описания при первом появлении: дальше лист персонажа переносит его в каждый кадр.
Делайте смену сцены заметной. Начните новый абзац или напишите заголовок вроде «НАТ. ГАВАНЬ — РАССВЕТ» там, где меняется место или время. Скачок «три года спустя» посреди предложения легко пропустить.
Пишите то, что может увидеть камера. «Он был уверен, что она врёт» не нарисуешь. «Он ставит чашку и так и не отпивает» — можно. Чувства лучше всего передаются через действия, лица и жесты.
Показывайте, кто говорит. В прозе подписывайте реплики («…» — сказала Мира) хотя бы при смене говорящего, в сценарии это делает имя над репликой. Тогда у каждого героя остаётся свой голос.
Разводите рассказчика и героев. Текст, который никто из героев не произносит, читает рассказчик. Если мысли героя должны звучать его голосом, запишите их как реплику.
Думайте о темпе. Длинное описание пейзажа может стать несколькими тихими кадрами, а драка, уместившаяся в одно предложение, — одним кадром. Если момент важен, дайте ему место на странице.
Начните с одной сцены. Вставьте первую сцену, посмотрите на листы героев и первые кадры, поправьте текст — и только потом вставляйте остальное. Так дешевле, и сразу видно, как нейросеть читает ваш текст.
Нарисованные кадры или стоковые клипы: два подхода к видео по тексту
Многие сервисы, которые делают видео по тексту, работают со стоковой библиотекой: читают сценарий по предложениям и к каждому подбирают готовый стоковый клип. Это быстро и для части роликов подходит. Insaga идёт другим путём и рисует новый кадр для каждого момента истории.
| Insaga | Видео по тексту из стоков | |
|---|---|---|
| Откуда берётся картинка | Рисуется под ваш текст, кадр за кадром | Подбирается из библиотеки готовых клипов |
| Ваши герои | Создаются один раз и одинаковы в каждой сцене | Кто попал в клип, тот и в кадре |
| Выдуманные миры | Всё, что можно написать: пещера дракона, город в облаках, говорящий лис | Только то, что кто-то уже снял |
| Облик | 100+ стилей — от стикмена до масляной живописи — или свой | Как у отснятого материала |
| Лучше всего подходит для | Историй, фантастики, мультфильмов, сериалов с постоянными героями | Роликов о реальных местах, товарах и новостях |
У каждого подхода своё место. Ролику о реальных местах, товарах или событиях, которому нужна настоящая съёмка, может больше подойти стоковая библиотека. Истории с героями нужны кадры, нарисованные именно под неё.
Вопросы о видео по сценарию
Что именно нейросеть делает с моим сценарием?
Снимает по нему видео. Insaga делит текст на сцены, находит героев и места действия, один раз придумывает их облик, рисует и оживляет каждый кадр, озвучивает реплики и текст рассказчика и собирает всё на таймлайне. На каждом шаге можно вмешаться: поправить героев до первого кадра, перерисовать кадр до анимации, переназначить реплику до озвучки.
Чем видео по сценарию отличается от обычной генерации видео по тексту?
Обычно «видео по тексту» — это один промпт и один короткий ролик, а порядок кадров вы продумываете сами. Видео по сценарию начинается с целого текста: сцены, кадры, кто в них и в каком порядке — это нейросеть планирует за вас.
В каком виде вставлять сценарий?
Хватит обычного текста: сценарный формат, проза, пьеса или всё вперемешку. Важнее формата ясность: одно имя на героя, заметная смена сцен и понятно, кто говорит.
Нужно ли писать промпт к каждому кадру?
Нет. Кадры строятся по вашему тексту, так что вы правите историю, а не промпты. Если один кадр не удался, перерисовывается только он.
Как нейросеть понимает, кто из героев говорит?
При озвучке Insaga делит текст на реплики и приписывает каждую говорящему. Разбивку видно, и любую реплику можно вручную отдать другому герою. Текст, который не принадлежит никому из героев, и реплики героев без выбранного голоса читает рассказчик.
Что, если в тексте не описана внешность героев?
Нейросеть всё равно придумает их облик — по тому, что следует из текста, и по выбранному стилю. Результат вы увидите в листах персонажей раньше, чем будет нарисован первый кадр, и там же сможете героя изменить или заменить его картинку своей. Если деталь важна — шрам, красное пальто, выбитый зуб, — упомяните её в тексте один раз.
Может ли нейросеть пройти весь путь сама?
На тарифе Studio — да. Автопилот за один запуск ведёт историю через картинки, анимацию, озвучку и таймлайн до готового видео. Можно идти и по шагам, проверяя каждый этап, — так лучше делать, когда вы впервые пробуете новый тип текста.
Можно ли сделать видео по сценарию нейросетью бесплатно?
Бесплатно можно начать. Новый аккаунт один раз получает 100 кредитов без привязки карты: этого хватит, чтобы создать героев и нарисовать кадры короткой сцены — и понять, как нейросеть читает ваш текст. Анимация, озвучка и экспорт — на платных тарифах, а на тарифе Studio генерация картинок и анимации безлимитна.
Куда дальше
Вставьте первую сцену
Посмотрите, как нейросеть прочитает ваш текст: какие сцены найдёт, каких героев придумает, какими выйдут первые кадры. Первые 100 кредитов — бесплатно, карта не нужна.
Работает в браузере, ничего устанавливать не нужно.