Integração da API de Volcengine Video Lip Sync
Use Volcengine Video Lip Sync pela Rivya Public API v1 com o ID de modelo volcengine-video-lip-sync, entradas compatíveis, parâmetros, regras da Files API, créditos e exemplos de resposta.
volcengine-video-lip-sync
file
Obrigatório para modos com referência
per_input_second · default=8 · ⌈total⌉
Vídeo
METERED
Sem limite de prompt documentado
Contrato da requisição
Envie o ID do modelo no nível superior. Controles específicos do modelo ficam em params.
| Chave | Tipo | Obrigatório | Padrão | Descrição |
|---|---|---|---|---|
| model | string | Sim | volcengine-video-lip-sync | Use volcengine-video-lip-sync como ID do modelo da API. |
| prompt | string | Não | - | Texto de prompt para modelos que aceitam entrada de texto. |
| params | object | Sim | - | Objeto de parâmetros específico do modelo. Use as linhas abaixo para ver as chaves permitidas. |
| client_request_id | string | Não | - | ID opcional do cliente para rastrear requisições no seu sistema. |
Parâmetros do modelo
| Chave | Tipo | Obrigatório | Padrão | Intervalo | Opções | Descrição |
|---|---|---|---|---|---|---|
| mode | select | Sim | lite | - | lite, basic | Lite é adequado para filmagens frontais de uma única pessoa; Basic aceita cenas mais complexas com uma única pessoa. |
| separate_vocal | select | Não | false | - | false, true | Ative a separação vocal quando o áudio de destino incluir sons de fundo que devem ser suprimidos. |
| open_scenedet | select | Não | false | - | false, true | Disponível apenas no modo Basic para segmentação de cena e identificação do falante. |
| align_audio | select | Não | true | - | true, false | Disponível apenas no modo Lite. Repita o vídeo quando o áudio for mais longo que a filmagem de origem. |
| align_audio_reverse | select | Não | false | - | false, true | Disponível apenas no modo Lite e exige que o alinhamento de áudio esteja ativado. |
| templ_start_seconds | number | Não | 0 | min 0 | - | Disponível apenas no modo Lite. Escolha um tempo inicial não negativo no vídeo de origem. |
Política de upload
Faça upload dos arquivos de referência primeiro; depois coloque a URL retornada e o durationToken dentro de params.referenceMediaItems.
Vídeo de origem e áudio de destino: Envie exatamente um vídeo MP4 ou MOV de até 95 MB e uma faixa vocal MP3, M4A, WAV, AAC ou OGG de até 10 MB.
2
video, audio
Referências de vídeo e áudio devem carregar durationToken de /api/v1/files quando a verificação de duração for exigida.
| kind | Tamanho máximo | Tipos MIME |
|---|---|---|
| video | 95 MB | video/mp4, video/quicktime |
| audio | 10 MB | audio/mpeg, audio/mp4, audio/wav, audio/x-wav, audio/aac, audio/ogg |
Requisição mínima
{
"model": "volcengine-video-lip-sync",
"params": {
"mode": "lite",
"separate_vocal": "false",
"open_scenedet": "false",
"align_audio": "true",
"align_audio_reverse": "false",
"templ_start_seconds": 0
}
}Requisição com arquivo de referência
{
"model": "volcengine-video-lip-sync",
"params": {
"mode": "lite",
"separate_vocal": "false",
"open_scenedet": "false",
"align_audio": "true",
"align_audio_reverse": "false",
"templ_start_seconds": 0,
"referenceMediaItems": [
{
"url": "https://cdn.example.com/reference-video.mp4",
"kind": "video",
"name": "reference-video.mp4",
"mimeType": "video/mp4",
"durationSeconds": 8,
"durationToken": "video_duration_token_from_files_api",
"width": 1280,
"height": 720,
"sizeBytes": 8388608,
"framesPerSecond": 30,
"videoBitrateMbps": 8,
"videoMetadataToken": "video_metadata_token_from_original_files_api_upload_response"
},
{
"url": "https://cdn.example.com/reference-audio.wav",
"kind": "audio",
"name": "reference-audio.wav",
"mimeType": "audio/wav",
"durationSeconds": 12,
"durationToken": "audio_duration_token_from_files_api"
}
]
}
}Resposta de criação
O endpoint de criação retorna um ID público de tarefa. Consulte o endpoint de status até a tarefa ser concluída ou falhar.
{
"id": "task_volcengine_video_lip_sync_example",
"status": "queued",
"model": "volcengine-video-lip-sync",
"reserved_credits": 8,
"final_credits": 0,
"settlement_status": "RESERVED",
"created_at": "2026-05-11T00:00:00.000Z",
"updated_at": "2026-05-11T00:00:00.000Z",
"result": null,
"error": null
}Erros comuns
validation_failed, insufficient_credits, idempotency_conflict, rate_limited, not_found
Alguns modos exigem uploads de referência pela Files API.