PixVerse AI представляет собой очередную платформу для генерации анимации и видео, запущен китайским стартапом AIsphere. Буквально за несколько месяцев сервис стал популярным, в сети появилось большое количество роликов на самые разные темы.
Общий принцип работы стандартен – пользователю необходимо загрузить текстовое описание, на основе которого будет создано новое видео. Можно указать основные параметры, стиль, фон, персонажей, сюжетную линию и так далее. Также предусмотрено большое количество шаблонов для быстрого создания роликов без навыков дизайна или монтажа.
Есть и готовые режимы, которые активно используются для создания вирусных роликов. К примеру, эффект «Обними себя» (Hug Your Love) – на основе двух фотографий можно создать трогательное видео, когда человек обнимает себя в другом возрасте.
Основные возможности:
— генерация видео по текстовому описанию;
— анимация фотографий;
— создание видео на основе загруженной картинки;
— синхронизация движения губ с произвольной звуковой дорожкой;
— создание собственных персонажей на основе картинки или текстового описания;
— быстрая обработка видео при помощи готовых шаблонов.
Сервис отличается высокой скоростью работы – стандартные запросы обрабатываются буквально в течение минуты. Список доступных инструментов и шаблонов также постоянно расширяется.
Способы запуска
Получить доступ можно через официальный сайт или мобильный клиент для iOS или Android, есть отдельный Discord-сервер. Для приложения и сайта доступны разные языки интерфейса, включая русский.
Стоит учитывать, что мобильный клиент использует несколько ограниченный набор функций. Его удобно использовать для быстрого создания роликов на ходу, исходный контент загружается из галереи, результат сразу можно сразу загрузить в социальную сеть.
Тарифные планы
После регистрации активируется бесплатный режим, который подразумевает выдачу ежедневно 60 бесплатных кредитов. Этого хватает на 2-3 небольших видео. Также есть ограничение по шаблонам – не более 2 запросов. Также на всех видео будет водяной знак, не будет функции пакетной генерации, а время обработки заметно увеличится.
Платных тарифов всего четыре – от корпоративного до стандартного. Предоставляется увеличенный объем кредитов, пакетная генерация, полный доступ к шаблонам. Также активируется возможность использовать HD-разрешение и отдельная панель для аналитики просмотров во встроенном каталоге. Если подписка не нужна, предусмотрена возможность отдельно приобрести пакеты кредитов. Это удобно для разовых проектов.
Интерфейс
Интерфейс стартовой страницы включает много инструментов, но разобраться в них достаточно легко. Все элементы логично разбиты на блоки, далее они будут кратко рассмотрены.
Панель генерации. Основная рабочая зона, находится в нижней части интерфейса. Основные возможности:
— выбор готового шаблона из галереи;
— настройка длительности и формата выходного файла;
— загрузка собственного контента;
— ввод текстового запроса;
— кнопка запуска генерации.
Лента с контентом от других пользователей. На сервисе предусмотрены социальные функции – пользователи могут загружать свои работы и просматривать контент других участников. Это достаточно полезный инструмент, поскольку ролики сопровождаются используемым промпом. Если результат понравился, текст промпта и сами ролики легко переносятся в собственные проекты.
Страница генерации. После нажатия на кнопку «Создать», которая находится в отдельном меню слева, открывается отдельная панель генерации. Она позволяет загрузить собственное изображение, ввести текстовый запрос и выбрать подходящий шаблон из набора. Отдельная секция позволяет выбрать параметры выходного файла.
Опубликованные работы показывают, что PixVerse хорошо справляется с промптами на русском языке. Для получения нужного результата рекомендуется предоставлять краткое описание всех ключевых требований к видео.
Общий алгоритм создания нового видео при помощи текстового запроса:
— авторизоваться или зарегистрироваться на сервисе;
— форма ввода промта доступна уже на стартовом экране, также можно нажать кнопку «Создать» для активации отдельной панели генерации;
— ввести все основные требования к результату. Не стоит пытаться предоставлять ИИ несколько возможных вариантов, алгоритм, скорее всего, попытается совместить их в одном ролике, что приведет к неожиданному результату;
— настройка параметров видео. На этом шаге выбирается стиль, например, аниме или мультфильм, соотношение сторон и продолжительность. Стоит учитывать, что от времени зависит количество потраченных кредитов. 30 кредитов при стандартных настройках хватает на 5-секундное видео. Отдельная опция дает возможность выбрать разрешение, высокое качество в бесплатной версии заблокировано. Непосредственно в промпте допускается указание нужной звуковой дорожки или диалогов для персонажей;
— отдельно предусмотрена возможность настроить режим движения камеры, перспективу и траекторию персонажей. После проверки введенной информации нужно нажать на кнопку «Создать» и ожидать уведомления о готовности;
— после завершения генерации пользователь получает возможность сразу загрузить файл или перейти к редактированию, если результат не устраивает.
Рекомендации:
— для улучшения результата необходимо добавлять описание особенностей движения камеры, особенности освещения сцены, время суток;
— модель лучше понимает конкретные глаголы и существительные. Запрос «Ребенок на улице» будет слишком размытым, лучше использовать формат «Бегущий по тропинке ребенок».
Генерация видео на основе исходного изображения
Загрузить подходящий контент можно непосредственно на стартовой странице или открыв страницу генерации. В последнем случае необходимо убедиться, что предварительно активирована опция «Режим изображения/текста» (кнопка находится в левом меню).
При помощи проводника выбрать нужные файлы, для картинок поддерживаются только форматы PNG и JPG. В текстовое поле вводится информация, как должна развиваться сцена. Например, загрузить свое фото и указать «Персонаж разворачивается через левое плечо и приседает».
На следующем шаге выбираются подходящие параметры проекта. Для удобства предусмотрен инструмент Seed Number: заранее собственный шаблон и получить для него уникальный идентификатор. В дальнейшем его можно использовать в других проектах. Это дает возможность создавать ролики в едином стиле. Далее останется только запустить генерацию и проверить полученный результат.
Есть режим «Переход»: загружается две фотографии, которые используются в качестве начальной и конечной сцены. Отдельно в формате промпта добавляются дополнительные требования.
Создание персонажа
При помощи текста или изображения можно создать нового персонажа, сохранить его в каталог и использовать в других проектах.
— перейти в раздел «Персонаж»;
— в поле для ввода нового промпта нажать на иконку в виде смайлика, далее на кнопку «Создать». Указывается имя персонажа, картинка для основы и другие параметры. Для подтверждения достаточно нажать «Создать персонажа»;
— после возвращения на страницу генерации появляется возможность добавить дополнительное описание. Предусмотрена функция «Автопромпт», которая позволяет автоматически улучшить исходный запрос;
— для платных тарифов доступны дополнительные возможности, включая указания стиля и типа аватара;
— после добавления нового персонажа его можно быстро добавлять в новые видео, просто указывая имя в промпте («Лариса сидит на скамейке с цветами»).
Добавление звуковой дорожки
Добавление озвучки также не вызывает сложностей, работа осуществляется при помощи пошагового режима. Алгоритм действий:
— в редакторе открыть вкладку «Голос» для доступа к нужным инструментам;
— можно загрузить собственный аудиофайл, выбрать подходящую запись из каталога или просто ввести в поле текст, который необходимо озвучить. В текущей версии сервис не всегда корректно справляется с русским акцентом: может проявляться необычный акцент или различные дефекты;
— для генерации с указанными параметрами необходимо нажать «Создать».
Работа с эффектами
В арсенале есть ряд интересных эффектов, многие из которых и позволили создавать вирусные ролики: превращение в Венома, объятие с собой в детстве или стилизация под определенный мультфильм. Для добавления нового эффекта:
— открыть раздел «Шаблон» и выбрать подходящую категорию. Режимов достаточно много, но наличие разделов упрощает поиск нужного элемента. При работе в бесплатном тарифе в сутки доступно только два эффекта;
— количество настроек минимально, для продолжения необходимо нажать кнопку «Создать».