透過 Rivya Public API v1 呼叫 Volcengine Video Lip Sync，包含模型 ID volcengine-video-lip-sync、輸入類型、參數、Files API 規則、點數和回應範例。

API 可呼叫可用狀態影片

API 模型 ID

volcengine-video-lip-sync

輸入類型

file

Files API

參考素材模式需要

基礎點數

per_input_second · default=8 · ⌈total⌉

能力類型

影片

計費方式

METERED

Prompt 上限

未設定 prompt 上限

請求欄位

模型 ID 放在頂層欄位。模型專屬控制項放入 params。

Key	類型	必填	預設值	說明
model	string	是	volcengine-video-lip-sync	使用 volcengine-video-lip-sync 作為 API 模型 ID。
prompt	string	否	-	支援文字輸入的模型使用這個欄位傳入 prompt。
params	object	是	-	模型專屬參數物件。可用 keys 請見下方參數表。
client_request_id	string	否	-	可選的用戶端請求 ID，方便你在自己的系統中追蹤請求。

模型參數

Key	類型	必填	預設值	範圍	選項	說明
mode	select	是	lite	-	lite, basic	Lite 適合正面單人畫面；Basic 支援較複雜的單人場景。
separate_vocal	select	否	false	-	false, true	當目標音訊包含應抑制的背景聲時，請啟用人聲分離。
open_scenedet	select	否	false	-	false, true	僅在 Basic 模式中提供，用於場景分段與說話者識別。
align_audio	select	否	true	-	true, false	僅在 Lite 模式中提供。當音訊長於來源畫面時，循環播放影片。
align_audio_reverse	select	否	false	-	false, true	僅在 Lite 模式中提供，並要求音訊對齊已開啟。
templ_start_seconds	number	否	0	min 0	-	僅在 Lite 模式中提供。選擇來源影片中不小於 0 的開始時間。

上傳策略

先上傳參考文件，再把回傳的 URL 和 durationToken 放入 params.referenceMediaItems。

參考素材規則

來源影片與目標音訊: 上傳恰好一段不超過 95 MB 的 MP4 或 MOV 影片，以及一條不超過 10 MB 的 MP3、M4A、WAV、AAC 或 OGG 人聲軌。

最大文件數

支援文件類型

video, audio

時長 Token

影片和音訊參考素材需要時長驗證時，應攜帶 /api/v1/files 回傳的 durationToken。

kind	大小上限	MIME 類型
video	95 MB	video/mp4, video/quicktime
audio	10 MB	audio/mpeg, audio/mp4, audio/wav, audio/x-wav, audio/aac, audio/ogg

最小請求

{
  "model": "volcengine-video-lip-sync",
  "params": {
    "mode": "lite",
    "separate_vocal": "false",
    "open_scenedet": "false",
    "align_audio": "true",
    "align_audio_reverse": "false",
    "templ_start_seconds": 0
  }
}

參考文件請求

{
  "model": "volcengine-video-lip-sync",
  "params": {
    "mode": "lite",
    "separate_vocal": "false",
    "open_scenedet": "false",
    "align_audio": "true",
    "align_audio_reverse": "false",
    "templ_start_seconds": 0,
    "referenceMediaItems": [
      {
        "url": "https://cdn.example.com/reference-video.mp4",
        "kind": "video",
        "name": "reference-video.mp4",
        "mimeType": "video/mp4",
        "durationSeconds": 8,
        "durationToken": "video_duration_token_from_files_api",
        "width": 1280,
        "height": 720,
        "sizeBytes": 8388608,
        "framesPerSecond": 30,
        "videoBitrateMbps": 8,
        "videoMetadataToken": "video_metadata_token_from_original_files_api_upload_response"
      },
      {
        "url": "https://cdn.example.com/reference-audio.wav",
        "kind": "audio",
        "name": "reference-audio.wav",
        "mimeType": "audio/wav",
        "durationSeconds": 12,
        "durationToken": "audio_duration_token_from_files_api"
      }
    ]
  }
}

建立回應

建立 endpoint 會回傳公開 task id。繼續輪詢狀態 endpoint，直到任務成功或失敗。

{
  "id": "task_volcengine_video_lip_sync_example",
  "status": "queued",
  "model": "volcengine-video-lip-sync",
  "reserved_credits": 8,
  "final_credits": 0,
  "settlement_status": "RESERVED",
  "created_at": "2026-05-11T00:00:00.000Z",
  "updated_at": "2026-05-11T00:00:00.000Z",
  "result": null,
  "error": null
}

常見錯誤

validation_failed, insufficient_credits, idempotency_conflict, rate_limited, not_found

部分模式需要透過 Files API 上傳參考素材。

Volcengine Video Lip Sync API 接入文件