Audio To Video
нейросеть
Audio To Video — генерация видео по аудио с опорой на изображение или текстовый промпт
Характеристики
- Входные данные
- текст, изображения
- Результат
- видео
Генерация видео
(длительность 8 сек., 720p)
Генерация видео
(длительность 8 сек., 1080p)
async function generateVideo() {
const BASE_URL = 'https://openai.bothub.chat/v1';
const API_KEY = '<your bothub access token>';
// Step 1: create the generation request
const createRes = await fetch(`${BASE_URL}/videos/generations`, {
method: 'POST',
headers: {
'Content-Type': 'application/json',
Authorization: `Bearer ${API_KEY}`,
},
body: JSON.stringify({
model: 'audio-to-video',
prompt: 'Timelapse of a blooming flower in a sunny garden',
notify: false,
settings: {
duration_seconds: 6,
aspect_ratio: '16:9',
},
}),
});
const { id } = await createRes.json();
// Step 2: poll the status until the video is ready
let video;
while (true) {
await new Promise((r) => setTimeout(r, 10000));
const statusRes = await fetch(`${BASE_URL}/videos/${id}?include_usage=true`, {
headers: { Authorization: `Bearer ${API_KEY}` },
});
video = await statusRes.json();
if (video.status === 'completed' || video.status === 'failed') break;
}
if (video.status === 'completed') {
console.log('Video URL:', video.unsignedUrls[0]);
} else {
console.error('Generation error:', video.error);
}
}generateVideo();
Как работает Audio To Video?
Audio To Video — модель для генерации видеороликов по заданной аудиодорожке с возможностью учитывать изображение или текстовый промпт. Она преобразует ваш звук в видео с учётом заданных визуальных ориентиров, позволяя задать композицию через картинку или описание. Через BotHub вы получаете доступ из России без VPN и оплату в рублях по факту, единый интерфейс со всеми моделями и совместимый OpenAI API для мультимодельных решений, а также шифрование AES-GCM и корпоративные условия с выставлением счёта и админ‑панелью. Сценарии применения: создание клипов и тизеров по аудио, визуализация подкастов и аудиопроектов, прототипирование контента для соцсетей, генерация видеопревью к звуковым эффектам, тестирование концепций для студий и агентств.Частые вопросы о Audio To Video
Вы можете использовать результаты генерации в коммерческих целях. Все права на созданный контент принадлежат вам. Единственное ограничение: убедитесь, что в запросе не использовались защищённые авторским правом материалы третьих сторон. Ответственность за соблюдение прав на входные данные лежит на пользователе.
Audio to Video генерирует видеоряд по текстовому описанию и визуальным референсам: превращает идеи и изображения в видео. Подходит для прототипов, рекламных роликов, сторителлинга и быстрой визуализации концептов, когда нужно быстро получить видеопредставление идеи.
Модель выдаёт видеоконтент; точные форматы, кодеки и разрешения в данных не указаны. Параметры экспорта и качество задаются через интерфейс BotHub или API, поэтому конкретные технические детали и доступные варианты следует смотреть в документации сервиса.
В наших данных о поддержке рассуждений перед ответом (chain-of-thought) не отмечено. Модель ориентирована на генерацию видео по входным описаниям и референсам, поэтому пошаговые внутренние рассуждения не задокументированы и не являются основной функцией.
Данные по вызову функций и структурированному выводу в формате JSON в описании модели не отмечены. Если нужна машинно-парсируемая выдача, реализуйте преобразование результатов через API BotHub или внешнюю обвязку и проверьте документацию.
В описании указано, что модель принимает на вход текст и изображения как референсы. Информация о загрузке аудио или видео как входа в наших данных не отмечена, поэтому возможность подачи аудиофайлов или видеотреков следует уточнить в техпаспорте модели на BotHub.
Модель помечена как ENGLISH_ONLY, то есть рассчитана на работу с английским языком. Поддержка русского в данных не подтверждена, поэтому использование русскоязычных промтов, скорее всего, ограничено или приведёт к некорректным результатам.