Audio To Video
нейрожелі
Audio To Video — аудио негізінде кескін немесе мәтіндік промпт арқылы видео генерациялау
Сипаттамалары
- Кіріс деректер
- мәтін, кескіндер
- Нәтиже
- бейне
Видео жасауы
(Ұзақтығы 8 секунд, 720p)
Видео жасауы
(Ұзақтығы 8 секунд, 1080p)
async function generateVideo() {
const BASE_URL = 'https://openai.bothub.chat/v1';
const API_KEY = '<your bothub access token>';
// Step 1: create the generation request
const createRes = await fetch(`${BASE_URL}/videos/generations`, {
method: 'POST',
headers: {
'Content-Type': 'application/json',
Authorization: `Bearer ${API_KEY}`,
},
body: JSON.stringify({
model: 'audio-to-video',
prompt: 'Timelapse of a blooming flower in a sunny garden',
notify: false,
settings: {
duration_seconds: 6,
aspect_ratio: '16:9',
},
}),
});
const { id } = await createRes.json();
// Step 2: poll the status until the video is ready
let video;
while (true) {
await new Promise((r) => setTimeout(r, 10000));
const statusRes = await fetch(`${BASE_URL}/videos/${id}?include_usage=true`, {
headers: { Authorization: `Bearer ${API_KEY}` },
});
video = await statusRes.json();
if (video.status === 'completed' || video.status === 'failed') break;
}
if (video.status === 'completed') {
console.log('Video URL:', video.unsignedUrls[0]);
} else {
console.error('Generation error:', video.error);
}
}generateVideo();
Қалай жұмыс істейді Audio To Video?
Audio To Video — берілген аудиожол негізінде кескін немесе мәтіндік промптты ескере отырып, видеороликтер генерациялауға арналған модель. Ол дыбысты берілген визуалды бағдарлармен видеоға түрлендіреді, бұл сурет немесе сипаттама арқылы композиция құруға мүмкіндік береді. BotHub арқылы сіз Ресейден VPN-сіз қол жеткізе аласыз, рубльмен төлем жасай аласыз, барлық модельдерге ортақ интерфейсті және мультимодальды шешімдерге арналған үйлесімді OpenAI API-ді пайдалана аласыз, сонымен қатар AES-GCM шифрлауы және есепшот қою мүмкіндігі бар корпоративті шарттар мен әкімшілік панельге ие боласыз. Қолдану сценарийлері: аудио бойынша клиптер мен тизерлер жасау, подкасттар мен аудиожобаларды визуалдау, әлеуметтік желілерге арналған контентті прототиптеу, дыбыстық эффектілерге арналған видеопревью генерациялау, студиялар мен агенттіктерге арналған концепцияларды тестілеу.Audio To Video туралы жиі қойылатын сұрақтар
Генерация нәтижелерін коммерциялық мақсатта пайдалана аласыз. Жасалған контентке барлық құқық сізге тиесілі. Жалғыз шектеу: сұрауда үшінші тараптардың авторлық құқықпен қорғалған материалдары пайдаланылмағанына көз жеткізіңіз. Кіріс деректерінің құқықтарын сақтау жауапкершілігі пайдаланушыға жүктеледі.
Audio to Video мәтіндік сипаттамалар мен визуалды референстер негізінде видеоқатарды генерациялайды: идеялар мен кескіндерді видеоға айналдырады. Прототиптер, жарнамалық роликтер, сторителлинг және идеяның видеокөрінісін жылдам алу қажет болған кезде концепттерді жылдам визуализациялау үшін жарамды.
Модель видеоконтентті шығарады; нақты форматтар, кодектер және ажыратымдылық деректерде көрсетілмеген. Экспорт параметрлері мен сапасы BotHub интерфейсі немесе API арқылы орнатылады, сондықтан нақты техникалық мәліметтер мен қолжетімді нұсқаларды сервистің құжаттамасынан қарау керек.
Біздің деректерімізде жауап берер алдында пайымдауды (chain-of-thought) қолдау туралы ақпарат жоқ. Модель кіріс сипаттамалары мен референстер бойынша видео генерациялауға бағытталған, сондықтан кезең-кезеңімен ішкі пайымдаулар құжатталмаған және негізгі функция болып табылмайды.
Модель сипаттамасында функцияларды шақыру және JSON форматында құрылымдалған шығыс туралы деректер көрсетілмеген. Егер машиналық талдауға жарамды нәтиже қажет болса, нәтижелерді түрлендіруді BotHub API немесе сыртқы құралдар арқылы жүзеге асырыңыз және құжаттаманы тексеріңіз.
Сипаттамада модель кіріс ретінде мәтін мен кескіндерді референс ретінде қабылдайтыны көрсетілген. Біздің деректерімізде аудио немесе видеоны кіріс ретінде жүктеу туралы ақпарат жоқ, сондықтан аудиофайлдарды немесе видеотректерді беру мүмкіндігін BotHub-тағы модельдің техникалық паспортынан нақтылау керек.
Модель ENGLISH_ONLY деп белгіленген, яғни ағылшын тілінде жұмыс істеуге арналған. Деректерде орыс тілін қолдау расталмаған, сондықтан орыс тіліндегі промттарды пайдалану шектеулі болуы немесе қате нәтижелерге әкелуі мүмкін.