Функция №461 Генерация видео из текста/изображений с использованием моделей CogVideoX-3 на ProTalk
Функция позволяет создавать видео из текстовых описаний или изображений с использованием мощной модели Z.AI CogVideoX-3. Поддерживает генерацию как из текстовых промптов, так и анимацию загруженных изображений. Параметры, которые можно передать в функцию zai_video: ai_model - модель для генерации видео. Указывает используемую модель, по умолчанию 'cogvideox-3'. prompt - текстовое описание для генерации видео. Указывает детальное описание сцены или действия для создания видео. image_url - URL изображений через запятую. Указывает ссылки на изображения для анимации. quality - режим вывода. Указывает приоритет качества или скорости генерации, по умолчанию 'quality'. duration - длительность видео в секундах. Указывает продолжительность видео, по умолчанию 5 секунд. size - разрешение видео. Указывает размер выходного видео, например '1920x1080' или '1280x720'. fps - частота кадров. Указывает количество кадров в секунду, по умолчанию 30. with_audio - включить аудио. Указывает, нужно ли добавлять звук к видео, по умолчанию True. aspect_ratio - соотношение сторон видео. Указывает пропорции видео, например '16:9'. Примеры: "Создай видео с летающим драконом в небе с помощью модели cogvideox-3." "Анимируй изображение по ссылке с горизонтальным форматом 16:9." "Сгенерируй короткое видео с морским пейзажем в высоком качестве с частотой 60 кадров в секунду." Создай инструкции Инструкция по работе с функцией №461 - Генерация видео Z.AI CogVideoX-3 5.1. Как работает эта функция в боте: Ваш ИИ агент анализирует запросы пользователей и при необходимости вызывает функцию генерации видео. Нейросеть самостоятельно принимает решение о вызове функции на основе описания функции и контекста диалога. 5.2. Добавление функции ИИ агенту: В настройках AI агента найдите функцию по номеру "461" или названию "zai_video" и добавьте её с помощью кнопки "Добавить". 5.3. Обучение ИИ использованию параметров: В промпте бота добавьте четкие инструкции: "Если пользователь просит создать видео или анимировать изображение, вызови функцию №461 zai_video " "В параметр prompt передай детальное описание сцены из запроса пользователя" "Если пользователь предоставил ссылку на изображение, передай её в параметр image_url" "Для вертикальных видео используй размер '720x1280' или соотношение сторон '9:16'" "Для горизонтальных видео используй размер '1920x1080' или соотношение сторон '16:9'" 5.4. Триггеры для вызова функции: "Создай видео с..." "Анимируй это изображение" "Сгенерируй ролик про..." "Сделай видео из картинки" "Нарисуй движущееся видео" 5.5. Пример инструкции в промпте: "Когда пользователь просит создать видео или анимировать изображение, сразу вызывай функцию №461. В параметр ai_model всегда передавай 'cogvideox-3'. Для параметра prompt используй максимально детальное описание того, что пользователь хочет видеть в видео. Если пользователь прислал изображение, передай ссылку в image_url. Для Stories используй вертикальный формат 720x1280 , для обычных видео - горизонтальный 1920x1080 . После генерации покажи пользователю ссылку на готовое видео." 5.6. Проверка работы функции: Протестируйте бота, отправляя запросы: "Создай видео с летающим единорогом в радужном небе" "Анимируй эту картинку [ссылка] с плавным движением" "Сделай короткий ролик про космос в высоком качестве" 5.7. Особенности работы: Функция использует API Z.AI, для работы может потребоваться токен доступа. Проверьте логи выполнения, чтобы убедиться в корректной передаче параметров и обработке результатов. 5.8. Ответы после выполнения: Настройте ответ бота после генерации: "Видео успешно создано! Вот ссылка на ваш ролик: [ссылка]. Поделитесь результатом в соцсетях!"
