Самая сильная видеомодель Alibaba уже здесь! Научите шаг за шагом создавать видео с дубляжом с помощью HappyHorse в одном предложении.
Если вы в последнее время обращали внимание на генерацию видео с помощью ИИ, вы наверняка видели новости о HappyHorse 1.0. Он очень хорошо работает в двух распространенных сценариях Vincent Video и Tusheng Video, особенно в «собственной синхронизации аудио и видео», которая очень практична: вводите слово-подсказку, и на выходе получается полное видео с дубляжом, звуком окружающей среды и фоновой музыкой.
Для создателей это означает перемены: раньше приходилось разбивать на «сначала экран, потом дубляж, а потом синхронизацию губ». Теперь множество коротких видеороликов можно снять за один шаг.
1. Где испытать HappyHorse
В настоящее время вы можете испытать это в приложении Qianwen. После обновления до последней версии на главной странице появится вход HappyHorse. Нажмите, чтобы войти на страницу генерации.
2. Основные этапы работы (новички могут начать работу за 3 минуты)
Шаг первый: войдите на страницу генерации HappyHorse.
- Откройте приложение Цяньвэнь
- Нажмите на вход HappyHorse на главной странице.
Шаг 2. Введите описание сцены.
Например:
一个穿西装的男人在雨夜的香港街头行走,霓虹灯闪烁,电影质感,港片风格。
Шаг 3. Выберите соотношение сторон.
| соотношение сторон | Подходит для сцены | Общие платформы |
|---|---|---|
| 16:9 | Рассказ на горизонтальном экране, обучающие материалы, демонстрации продуктов | Ютуб, официальный сайт |
| 9:16 | Вертикальное короткое видео | Доуин, Куайшоу, видеоаккаунт |
| 1:1 | Графика на квадратном экране и смешанное расположение текста | информационный поток в социальных сетях |
Шаг 4. Нажмите «Создать и просмотреть».
После отправки подождите немного, чтобы увидеть готовое видео. Звуковой контент будет включен по умолчанию, что устраняет необходимость вторичного синтеза вручную.
3. Как написать слова-подсказки, чтобы эффект был более устойчивым
Чем четче написаны подсказки, тем ближе полученные результаты будут к ожиданиям. Следующие варианты являются наиболее практичными.
1) Опишите конкретных персонажей и окружающую среду.
Вместо того, чтобы просто писать «идет человек», напишите:
一个穿灰色风衣的中年男人在下雨的街道上快步走,路灯昏黄,地面有积水反光。
2) Добавьте информацию о стиле
Четкие метки стиля в конце, такие как «стиль фильма в гонконгском стиле», «стиль чернил» и «стиль глиняной анимации», модели будут легче поддерживать единый визуальный тон.
3) Запишите движение камеры.
Можно указать напрямую:
- Камера медленно переходит от общего плана к крупному плану лица персонажа.
- Камера следует за персонажем и перемещается слева направо.
Это может значительно уменьшить «прыжки камеры».
4) Заранее укажите язык озвучки
Если в видео есть диалог между персонажами, рекомендуется четко указать язык в подсказке, например мандаринский, кантонский, английский, японский и т. д., чтобы модель могла одновременно обрабатывать речь и форму рта.
Полный пример слова-подсказки
一个年轻女孩坐在咖啡馆窗边看书,阳光从窗外照进来,桌上有一杯冒着热气的咖啡。镜头从窗外缓慢推进到女孩面部,女孩抬头微笑。港风电影感,16:9 画幅,人物使用普通话轻声说“今天真是适合开始创作的一天”。
4. Наблюдение реальных эффектов: какие места лучше всего использовать?
Четкость изображения
При выводе 1080P текстуры лиц персонажей и обычных сцен относительно стабильны, чего достаточно для выпуска коротких видеороликов.
Непрерывность нескольких кадров
При переключении между несколькими кадрами в течение 15 секунд связь естественна и сюжет не прерывается часто.
Синхронизация аудио и видео
В этом основная сила HappyHorse. Когда персонаж говорит, форма рта и голос хорошо совпадают, что позволяет сэкономить много времени на постобработке.
Недавние узлы
Указано официальное время открытия API. Пользователи команды могут напрямую интегрировать создание видео в свой собственный рабочий процесс с контентом.
5. Резюме
HappyHorse сжимает процесс создания видео до этапа «напишите слова-подсказки -> непосредственно создайте видео», что особенно подходит для команд и отдельных лиц, которые хотят быстро проверять идеи и создавать короткие видеоролики в пакетном режиме.
Если вы готовы начать фактическое тестирование, рекомендуется непрерывно генерировать 5–10 элементов по фиксированной теме, а затем повторять шаблон слова-подсказки на основе результатов. Эффективность будет значительно повышена.