ByteDance/seedance-v2.0-fast-reference-to-video

seedance-v2.0-fast-reference-to-video

Seedance 2.0 Fast リファレンスから動画 APIによるサウンド合成内蔵の動画生成。リアルな人物生成に対応し、低レイテンシと安定したパフォーマンスを競争力あるコストで最適化し、大規模または高頻度な動画ワークフローでも高い費用対効果を発揮します。開発者やチームが画像、動画、またはマルチモーダル生成フローへ接続しやすいモデルです。

Reference to Video

API 例

JavaScriptPythoncURL

送信例

// Step 1: Submit generation request
const response = await fetch('https://api.flaq.ai/api/v1/video/task', {
  method: 'POST',
  headers: {
    'Content-Type': 'application/json',
    'Authorization': 'Bearer YOUR_API_KEY'
  },
  body: JSON.stringify({
    model_name: 'seedance-v2.0-fast-reference-to-video',
    prompt: 'Use image one for the subject, follow the movement from video one, and use audio one for the atmosphere',
    resolution: '720p',
    duration: 8,
    aspect_ratio: '9:16',
    sound: true,
    images: ['https://example.com/subject-reference.jpg'],
    videos: ['https://example.com/motion-reference.mp4'],
    audios: ['https://example.com/atmosphere-reference.mp3']
  })
});

const { data } = await response.json();
const taskId = data.task_id;

// Use the @ (AT) reference feature in prompt through <<<...>>> placeholders.
// Placeholder numbering is 1-based for each media array:
// <<<image_1>>> = images[0], <<<image_2>>> = images[1]
// <<<video_1>>> = videos[0], <<<audio_1>>> = audios[0]
const mediaReferenceResponse = await fetch('https://api.flaq.ai/api/v1/video/task', {
  method: 'POST',
  headers: {
    'Content-Type': 'application/json',
    'Authorization': 'Bearer YOUR_API_KEY'
  },
  body: JSON.stringify({
    model_name: 'seedance-v2.0-fast-reference-to-video',
    prompt: 'Have the dancer from <<<image_1>>> perform the movement from <<<video_1>>> on the stage in <<<image_2>>>, using the rhythm from <<<audio_1>>>',
    resolution: '720p',
    duration: 10,
    aspect_ratio: '9:16',
    sound: true,
    images: [
      'https://example.com/dancer-reference.jpg',
      'https://example.com/stage-reference.jpg'
    ],
    videos: ['https://example.com/dance-movement-reference.mp4'],
    audios: ['https://example.com/rhythm-reference.mp3']
  })
});

const { data: mediaReferenceData } = await mediaReferenceResponse.json();
const mediaReferenceTaskId = mediaReferenceData.task_id;

ポーリング例

// Step 2: Poll for results
const taskId = data.task_id;

const pollResult = async (taskId) => {
  const res = await fetch(`https://api.flaq.ai/api/v1/video/${taskId}`, {
    headers: { 'Authorization': 'Bearer YOUR_API_KEY' }
  });
  return res.json();
};

while (true) {
  const pollResultData = await pollResult(taskId);
  const status = pollResultData.data.task_status;

  if (status === 'succeed') {
    console.log(pollResultData.data.task_result.videos[0].url);
    break;
  }

  if (status === 'failed') {
    console.error(pollResultData.data.task_status_msg);
    break;
  }

  await new Promise(resolve => setTimeout(resolve, 10000));
}

送信例

# Step 1: Submit generation request
import requests

response = requests.post(
    'https://api.flaq.ai/api/v1/video/task',
    headers={
        'Content-Type': 'application/json',
        'Authorization': 'Bearer YOUR_API_KEY'
    },
    json={
        'model_name': 'seedance-v2.0-fast-reference-to-video',
        'prompt': 'Use image one for the subject, follow the movement from video one, and use audio one for the atmosphere',
        'resolution': '720p',
        'duration': 8,
        'aspect_ratio': '9:16',
        'sound': True,
        'images': ['https://example.com/subject-reference.jpg'],
        'videos': ['https://example.com/motion-reference.mp4'],
        'audios': ['https://example.com/atmosphere-reference.mp3']
    }
)

result = response.json()
task_id = result['data']['task_id']

# Use the @ (AT) reference feature in prompt through <<<...>>> placeholders.
# Placeholder numbering is 1-based for each media array:
# <<<image_1>>> = images[0], <<<image_2>>> = images[1]
# <<<video_1>>> = videos[0], <<<audio_1>>> = audios[0]
media_reference_response = requests.post(
    'https://api.flaq.ai/api/v1/video/task',
    headers={
        'Content-Type': 'application/json',
        'Authorization': 'Bearer YOUR_API_KEY'
    },
    json={
        'model_name': 'seedance-v2.0-fast-reference-to-video',
        'prompt': 'Have the dancer from <<<image_1>>> perform the movement from <<<video_1>>> on the stage in <<<image_2>>>, using the rhythm from <<<audio_1>>>',
        'resolution': '720p',
        'duration': 10,
        'aspect_ratio': '9:16',
        'sound': True,
        'images': [
            'https://example.com/dancer-reference.jpg',
            'https://example.com/stage-reference.jpg'
        ],
        'videos': ['https://example.com/dance-movement-reference.mp4'],
        'audios': ['https://example.com/rhythm-reference.mp3']
    }
)

media_reference_result = media_reference_response.json()
media_reference_task_id = media_reference_result['data']['task_id']

ポーリング例

# Step 2: Poll for results
task_id = response.json()['data']['task_id']
poll_url = f"https://api.flaq.ai/api/v1/video/{task_id}"

while True:
    poll_result = requests.get(poll_url, headers={'Authorization': 'Bearer YOUR_API_KEY'}).json()
    status = poll_result['data']['task_status']
    if status == 'succeed':
        print(poll_result['data']['task_result']['videos'][0]['url'])
        break
    if status == 'failed':
        print(poll_result['data']['task_status_msg'])
        break
    time.sleep(10)

送信例

# Step 1: Submit generation request
curl -X POST https://api.flaq.ai/api/v1/video/task \
  -H "Content-Type: application/json" \
  -H "Authorization: Bearer YOUR_API_KEY" \
  -d '{
    "model_name": "seedance-v2.0-fast-reference-to-video",
    "prompt": "Use image one for the subject, follow the movement from video one, and use audio one for the atmosphere",
    "resolution": "720p",
    "duration": 8,
    "aspect_ratio": "9:16",
    "sound": true,
    "images": ["https://example.com/subject-reference.jpg"],
    "videos": ["https://example.com/motion-reference.mp4"],
    "audios": ["https://example.com/atmosphere-reference.mp3"]
  }'

# Use the @ (AT) reference feature in prompt through <<<...>>> placeholders.
# Placeholder numbering is 1-based for each media array:
# <<<image_1>>> = images[0], <<<image_2>>> = images[1]
# <<<video_1>>> = videos[0], <<<audio_1>>> = audios[0]
curl -X POST https://api.flaq.ai/api/v1/video/task \
  -H "Content-Type: application/json" \
  -H "Authorization: Bearer YOUR_API_KEY" \
  -d '{
    "model_name": "seedance-v2.0-fast-reference-to-video",
    "prompt": "Have the dancer from <<<image_1>>> perform the movement from <<<video_1>>> on the stage in <<<image_2>>>, using the rhythm from <<<audio_1>>>",
    "resolution": "720p",
    "duration": 10,
    "aspect_ratio": "9:16",
    "sound": true,
    "images": [
      "https://example.com/dancer-reference.jpg",
      "https://example.com/stage-reference.jpg"
    ],
    "videos": ["https://example.com/dance-movement-reference.mp4"],
    "audios": ["https://example.com/rhythm-reference.mp3"]
  }'

ポーリング例

# Step 2: Poll for results
# Replace {task_id} with the task_id returned from the submit response
curl -X GET "https://api.flaq.ai/api/v1/video/{task_id}" \
  -H "Authorization: Bearer YOUR_API_KEY"

今すぐAI動画生成を試す

Seedance 2.0 Fast Reference to Videoの料金

パラメータ	料金	元の料金	割引

解像度: 720p	$0.1600 / 秒	$0.2000 / 秒	80%
解像度: 480p	$0.0800 / 秒	$0.1000 / 秒	80%

README

高速かつ低コストな Seedance V2.0 Fast 参照動画生成 API

ByteDance Seedance V2.0 Fast 参照動画生成 API は、Flaq AI 上の迅速なクリエイティブワークフロー向けに、コスト効率の高い参照ガイド動画生成を提供します。現在の API 統合では、テキストプロンプトと少なくとも 1 つの参照画像または動画に加え、任意で追加の画像、動画、音声参照を使用できます。480p および 720p の出力、設定可能な長さ、複数のアスペクト比、任意の生成サウンド設定に対応しています。

Seedance V2.0 Fast 参照動画生成 API の主な機能

高速な参照ガイド生成： Fast バリアントを使用し、対応する画像、動画、および任意の音声参照を活用して迅速に反復できます。
画像と動画の参照入力： 複数の参照画像または動画クリップをアップロードして、生成結果をガイドします。各リクエストには少なくとも 1 つの画像または動画参照が必要です。
プロンプトで指定する音声参照： 必須のビジュアル参照メディアとともに、対応する音声クリップを追加し、プロンプトの指示を使用して、音声、音楽、タイミング、雰囲気などの目的の役割で参照するようモデルに指定します。
プロンプト内での参照指定： アップロードした画像、動画、音声アセットをプロンプトから参照し、リクエストする動画にどのような影響を与えるかを説明します。
任意の生成サウンド： API が対応するサウンド設定で、生成サウンドを有効または無効にできます。
効率的な解像度： 480p または 720p の出力を選択でき、高速プレビュー、反復、ソーシャルコンテンツ、大量処理のワークフローに適しています。
柔軟な長さとアスペクト比： 利用可能な横長、縦長、正方形、ウルトラワイド、標準形式で 4～15 秒の動画を生成できます。

Flaq AI で Seedance V2.0 Fast 参照動画生成 API を使用する方法

入力： 自然言語プロンプトと少なくとも 1 つの参照画像または動画。追加の画像、動画、および対応する音声クリップは任意です。
参照メディア： 複数の画像と動画参照に加え、任意で音声参照をアップロードします。参照動画と音声クリップは、対応する入力時間の範囲内に収める必要があります。
出力： Seedance V2.0 Fast 参照動画生成 API 統合を通じて生成動画が返され、有効にした場合は生成サウンドも利用できます。
長さ： 4～15 秒。リクエストごとに設定できます。
解像度： 480p または 720p。
アスペクト比： 複数の横長、縦長、正方形、ウルトラワイド、標準形式に対応しています。
コントロール： プロンプト、参照メディアの指定、出力時間、解像度、アスペクト比、生成サウンドの切り替え。

Seedance V2.0 Fast 参照動画生成 API 統合の最適なユースケース

迅速なクリエイティブプロトタイピング： 最終的なクリエイティブの方向性を選択する前に、プロンプトと参照の組み合わせをすばやくテストします。
大量のブランドコンテンツ： キャンペーンやソーシャル動画のバリエーションをリクエストする際に、商品、キャラクター、スポークスパーソン、シーンの参照を使用します。
ソーシャルメディア制作： 効率的な解像度とプラットフォームに適したアスペクト比で、参照ガイド付きの短尺動画を作成します。
音声を活用したクリエイティブリクエスト： アップロードした音声をプロンプトで指定し、音声、音楽、タイミング、雰囲気、その他のクリエイティブ要素のどれをガイドするかを説明します。
自動コンテンツパイプライン： 参照のアップロード、プロンプト内での指定、出力設定、生成サウンドを高スループットのアプリケーションワークフローに統合します。

注記少なくとも 1 つの参照画像または動画が必要です。音声のみを唯一の参照入力として使用することはできません。プロンプトと参照メディアが ByteDance のコンテンツ安全ガイドラインに準拠していることを確認してください。

Seedance V2.0 Fast 参照動画生成と競合製品の比較分析

Seedance V2.0 Fast と Seedance V2.0 Standard 参照動画生成 どちらのバリアントも、Flaq AI 上で同じ参照メディアの種類と主要コントロールを提供します。Fast バリアントは 480p と 720p の出力を使用し、標準バリアントはさらに 1080p と 4K のオプションを提供します。
Seedance V2.0 Fast と Seedance V2.0 Fast テキスト動画生成 Fast テキスト動画生成は、テキストプロンプトから動作します。Fast 参照動画生成では、対応する画像、動画、任意の音声入力と、プロンプト内でのメディア指定が追加されます。
Seedance V2.0 Fast と Wan 2.7 参照動画生成 どちらの API も画像と動画の参照に対応します。Wan 2.7 はネガティブプロンプトとシードのコントロールも提供し、Seedance V2.0 Fast は複数の任意の音声参照と生成サウンドの切り替えに対応します。
Seedance V2.0 Fast と Vidu Q3 参照動画生成 現在の Flaq AI 設定では、Vidu Q3 参照動画生成は画像参照を使用します。Seedance V2.0 Fast は参照動画と任意の参照音声にも対応します。
Seedance V2.0 Fast と Runway 動画ツール Runway は、より幅広いインタラクティブ制作スイートを提供します。Seedance V2.0 Fast 参照動画生成は、プロンプト、対応する参照のアップロード、効率的な出力設定、生成サウンドに特化した API ワークフローを提供します。