Kling 3.0: как создать видео из текста и фото

Kling 3.0 - нейросеть для коротких видео из текста, фото и референсов. Главное изменение в версии 3.0 - один ролик может состоять из нескольких планов, а не из одного затянутого кадра. Модель создаёт клипы длиной от 3 до 15 секунд. Это указано в официальном гайде Kling.

Новичку лучше начать не с мини-фильма, а с одного простого движения. Так легче понять, что сломалось: само описание, движение героя или камера.

Что такое Kling 3.0

Kling 3.0 - семейство моделей от компании Kuaishou. В него входят Video 3.0, Video 3.0 Omni, Image 3.0 и Image 3.0 Omni. Компания перечисляет эту линейку в официальном сообщении о запуске.

Для роликов нужен Video 3.0. Он принимает текст, фото, первый и последний кадр. Можно заказать один длинный план или несколько коротких. Официальный гайд также заявляет встроенный звук и более точную привязку реплик к персонажам.

Что изменилось в Kling 3.0

Польза многокадрового режима не в мутной «кинематографичности». Можно задать порядок: герой входит в кадр, замечает предмет, затем предмет показывается крупно. Раньше такую сцену приходилось делать кусками и склеивать.

Референс - это пример, на который модель ориентируется. Kling 3.0 может использовать несколько изображений или видео, чтобы закрепить внешность героя, предмет или обстановку. Это не отменяет брак, но уменьшает дурацкие скачки лица и одежды между планами.

Для каких задач подходит Kling 3.0

Kling силён там, где видео можно собрать из ясных планов. Например, показать товар целиком, затем деталь и реакцию человека. Или оживить фото так, чтобы герой повернулся, а камера после этого показала обстановку. Ещё один нормальный сценарий - черновой ролик до съёмки. Он покажет, не затянут ли ритм и понятна ли история.

Модель хуже подходит для сцен, где всё движется одновременно. Вода, дым, толпа, быстрая камера и мелкие детали в одном запросе - верный способ сжечь попытку. Надписи и пальцы тоже проверяйте отдельно. Улучшенная работа с текстом не гарантирует идеальные буквы.

Как сделать первый ролик в Kling 3.0

1. Откройте раздел «Видео». В Musya он находится на странице генерации видео.
2. Выберите Kling 3.0. Модель доступна в общем русскоязычном интерфейсе Musya.
3. Решите, нужен ли исходник. Загрузите фото для оживления или оставьте поле без файла для видео из текста.
4. Опишите сцену. Укажите героя, действие, место и одно движение камеры.
5. Начните с короткой длительности. Один простой план дешевле и понятнее проверять.
6. Просмотрите ролик покадрово. Не принимайте результат только по красивой первой секунде.

Kling 3.0 есть у нас на сайте. Оплата в Musya принимается российской картой, а названия настроек показаны на русском. Это убирает возню с иностранной оплатой и английским меню. Ошибки самой модели всё равно придётся ловить глазами.

Как написать запрос для Kling

Рабочая формула короткая: [кто или что] + [действие] + [место] + [движение камеры] + [свет и настроение].

Бариста ставит чашку кофе на деревянную стойку в маленькой кофейне. Камера медленно приближается к чашке. Мягкий утренний свет. Без надписей и лишних людей.

Для многокадрового ролика разбейте описание по планам. Не пихайте в каждый план нового героя, локацию и три действия. Пятнадцать секунд - это мало. Три ясных плана работают лучше шести суетливых.

Перед запуском перечитайте планы по порядку: переход между ними должен быть понятен без дополнительных объяснений.

Multi-Shot или один план: что выбрать

Несколько планов нужны не каждому ролику. Если человек просто поворачивает голову, чашка наполняется кофе или камера облетает товар, один непрерывный кадр проще. У модели меньше мест, где герой может внезапно поменять лицо, одежду или положение рук.

Multi-Shot полезен, когда смысл держится на смене точки зрения. Общий план показывает место. Средний показывает действие. Крупный показывает важную деталь. Если убрать один из них и история всё равно понятна, этот план лишний.

• Один план: оживление портрета, движение товара, пейзаж, короткое действие.
• Два плана: действие и реакция, общий вид и деталь, вопрос и ответ.
• Три плана: маленькая история с началом, изменением и итогом.

В обычном Multi-Shot модель сама решает, где менять ракурс. Это быстро, но результат может не совпасть с задумкой. В Custom Multi-Shot длительность и содержание каждого фрагмента задаёт пользователь. Оба режима описаны в официальном гайде Kling.

Почему Kling выдаёт кривой результат

Чаще всего проблема не в одном «неправильном слове». Модель получает слишком много требований, которые спорят друг с другом. Герой должен бежать, смотреть в камеру, держать товар и говорить. Камера одновременно приближается, вращается и трясётся. В пятнадцать секунд ещё пытаются втолкнуть новую локацию. Такой запрос выглядит подробным, но управлять им почти невозможно.

Исправляйте по одной причине. Сначала оставьте героя и действие. Потом верните движение камеры. После этого добавьте второй план. Если менять всё сразу, удачная попытка ничего не объяснит, а неудачная снова отправит вас тыкаться вслепую.

Как сделать видео из фото

Для видео из фото исходник важнее красивого запроса. Возьмите чёткий кадр без обрезанных рук, ног и главных предметов. Не берите маленькую картинку из мессенджера. Следы сжатия модель может принять за часть лица или текстуры.

Опишите только движение и то, что надо сохранить. Не пересказывайте всё фото. Если человек сидит, не заставляйте его сразу бежать. Поворот головы, взгляд, движение волос или медленное приближение камеры надёжнее.

Чем дальше движение от исходной позы, тем больше шанс на кривые руки, одежду и фон. Подробнее выбор движения разобран в статье о том, как оживить фото нейросетью.

Как проверить готовое видео

Просмотрите ролик до конца, затем покадрово. Лицо может быть нормальным в начале и поплыть на повороте. Логотип иногда ломается в движении. Фон может внезапно поменять дверь, мебель или цвет стены. Такая мелкая фигня делает ролик непригодным для рекламы.

• Герой узнаваем в каждом плане.
• Руки и пальцы не слипаются.
• Одежда и важные предметы не меняют цвет и форму.
• Надписи читаются всё время.
• Камера не дёргается.
• Переходы не рвут действие.
• Голос и губы совпадают, если включён звук.

Если сломался один план, не переписывайте всё. Сократите именно этот фрагмент. Уберите второе действие. Замените резкое движение камеры на медленное. Чем меньше изменений за один повтор, тем проще найти причину косяка.

Что нужно знать о звуке

Video 3.0 умеет создавать звук вместе с картинкой. В официальном гайде перечислены китайский, английский, японский, корейский и испанский языки. Если задать реплику на другом языке, Kling может перевести её на английский. Поэтому русскую речь нельзя обещать как штатный режим.

Для русского ролика надёжнее сначала сделать видео без реплик, а затем добавить озвучку в редакторе. Так не придётся переделывать удачную картинку из-за одной кривой фразы.

Частые вопросы о Kling 3.0

Kling 3.0 может сделать видео из фото?

Да. Загрузите фото и опишите движение героя и камеры. Для первого теста выбирайте небольшое движение, которое не ломает исходную позу.

Сколько длится видео Kling 3.0?

Официальный диапазон Video 3.0 - от 3 до 15 секунд. Конкретные варианты зависят от интерфейса, через который запускается модель.

Есть ли в Kling 3.0 звук?

Да, Video 3.0 поддерживает встроенную генерацию звука. Русский не указан среди пяти языков речи в официальном гайде.

Можно ли задать несколько планов?

Да. Multi-Shot сам планирует смену планов. Custom Multi-Shot позволяет описать длительность, ракурс и движение камеры для каждого фрагмента.

Где запустить Kling 3.0 в России?

Kling 3.0 доступен в Musya. Откройте раздел «Видео», выберите модель и оплатите генерацию российской картой.

С чего начать

Откройте Kling 3.0 в разделе «Видео» на Musya. Возьмите чёткое фото и закажите одно небольшое движение. После удачного короткого клипа добавьте второй план, затем третий. Не пытайтесь сразу втолкнуть в пятнадцать секунд весь сценарий. Модель не догадается, что для вас главное.

Один короткий тест даст больше пользы, чем десять чужих демо. Если лицо, движение и фон устраивают, усложняйте сцену. Если нет, выкиньте лишнее из запроса. Вот и вся магия.