AIテキストから画像生成ツール
主要AI画像モデル、柔軟な設定、高速なブラウザベースのワークフローで、プロンプトから洗練された画像を作成できます。
ByteDance/seedance-v2.0-mini-reference-to-video
seedance-v2.0-mini-reference-to-video
Seedance 2.0 Miniで画像、動画、音声を使用し、音声出力の有無と柔軟な長さに対応する手頃なByteDance APIで、参照ガイド動画を生成します。最大9枚の画像、3本の動画、3件の音声、1～12の参照主体に対応し、各動画・音声は2～15秒で指定でき、多参照ワークフローに活用できます。
Reference to Video
関連するSeedance 2.0 Miniモデル
API 例
送信例
const response = await fetch('https://api.flaq.ai/api/v1/video/task', {
method: 'POST',
headers: {
Authorization: 'Bearer YOUR_API_KEY',
'Content-Type': 'application/json',
},
body: JSON.stringify({
model_name: 'seedance-v2.0-mini-reference-to-video',
prompt:
'Use <<<image_1>>> as the character and visual reference, follow the camera movement in <<<video_1>>>, and synchronize the scene with <<<audio_1>>>.',
images: ['https://example.com/character-reference.jpg'],
videos: ['https://example.com/motion-reference.mp4'],
audios: ['https://example.com/audio-reference.mp3'],
resolution: '720p',
duration: 8,
aspect_ratio: '16:9',
sound: true,
}),
});
const { data } = await response.json();
const taskId = data.task_id;
ポーリング例
// Step 2: Poll for results
const taskId = data.task_id;
const pollResult = async (taskId) => {
const res = await fetch(`https://api.flaq.ai/api/v1/video/${taskId}`, {
headers: { 'Authorization': 'Bearer YOUR_API_KEY' }
});
return res.json();
};
while (true) {
const pollResultData = await pollResult(taskId);
const status = pollResultData.data.task_status;
if (status === 'succeed') {
console.log(pollResultData.data.task_result.videos[0].url);
break;
}
if (status === 'failed') {
console.error(pollResultData.data.task_status_msg);
break;
}
await new Promise(resolve => setTimeout(resolve, 10000));
}
送信例
import requests
response = requests.post(
'https://api.flaq.ai/api/v1/video/task',
headers={
'Authorization': 'Bearer YOUR_API_KEY',
'Content-Type': 'application/json',
},
json={
'model_name': 'seedance-v2.0-mini-reference-to-video',
'prompt': 'Use <<<image_1>>> as the character and visual reference, follow the camera movement in <<<video_1>>>, and synchronize the scene with <<<audio_1>>>.',
'images': ['https://example.com/character-reference.jpg'],
'videos': ['https://example.com/motion-reference.mp4'],
'audios': ['https://example.com/audio-reference.mp3'],
'resolution': '720p',
'duration': 8,
'aspect_ratio': '16:9',
'sound': True,
},
)
result = response.json()
task_id = result['data']['task_id']
ポーリング例
# Step 2: Poll for results
task_id = response.json()['data']['task_id']
poll_url = f"https://api.flaq.ai/api/v1/video/{task_id}"
while True:
poll_result = requests.get(poll_url, headers={'Authorization': 'Bearer YOUR_API_KEY'}).json()
status = poll_result['data']['task_status']
if status == 'succeed':
print(poll_result['data']['task_result']['videos'][0]['url'])
break
if status == 'failed':
print(poll_result['data']['task_status_msg'])
break
time.sleep(10)
送信例
curl -X POST 'https://api.flaq.ai/api/v1/video/task' \
-H 'Authorization: Bearer YOUR_API_KEY' \
-H 'Content-Type: application/json' \
-d '{
"model_name": "seedance-v2.0-mini-reference-to-video",
"prompt": "Use <<<image_1>>> as the character and visual reference, follow the camera movement in <<<video_1>>>, and synchronize the scene with <<<audio_1>>>.",
"images": ["https://example.com/character-reference.jpg"],
"videos": ["https://example.com/motion-reference.mp4"],
"audios": ["https://example.com/audio-reference.mp3"],
"resolution": "720p",
"duration": 8,
"aspect_ratio": "16:9",
"sound": true
}'
ポーリング例
# Step 2: Poll for results
# Replace {task_id} with the task_id returned from the submit response
curl -X GET "https://api.flaq.ai/api/v1/video/{task_id}" \
-H "Authorization: Bearer YOUR_API_KEY"
今すぐAI動画生成を試す
関連モデル
seedream-v4.5text-to-imageseedream-v4.5-editimage-to-imageseedream-v5.0text-to-imageseedream-v5.0-editimage-to-imageseedream-v5.0-protext-to-imageseedream-v5.0-pro-editimage-to-imageseedance-v1.5-pro-text-to-videotext-to-videoseedance-v1.5-pro-image-to-videoimage-to-videoseedance-v2.0-text-to-videotext-to-videoseedance-v2.0-image-to-videoimage-to-videoseedance-v2.0-reference-to-videoreference-to-videoseedance-v2.0-fast-text-to-videotext-to-videoseedance-v2.0-fast-image-to-videoimage-to-videoseedance-v2.0-fast-reference-to-videoreference-to-videoseedance-v2.0-mini-text-to-videotext-to-videoseedance-v2.0-mini-image-to-videoimage-to-videoseedance-v2.0-mini-reference-to-videoreference-to-videoseedance-v2.5-text-to-videotext-to-videoseedance-v2.5-image-to-videoimage-to-videoseedance-v2.5-reference-to-videoreference-to-videoREADME
手頃なマルチモーダル動画生成を実現する Seedance V2.0 Mini Reference-to-Video API
Seedance V2.0 Mini Reference-to-Video は、画像、動画、音声の参照素材から動画を生成できる、ByteDance のコストパフォーマンスに優れたモデルです。マルチモーダルなガイダンスと柔軟な出力制御を組み合わせており、標準の Seedance V2.0 モデルが提供する高解像度出力を必要とせず、一貫したビジュアルの方向性を求めるクリエイターや開発者に適しています。
Seedance V2.0 Mini Reference-to-Video の主な機能
- マルチモーダルな参照ガイダンス：1 回のリクエストで画像、動画、音声クリップを使用して生成をガイドできます。
- 柔軟な参照入力：1～9 枚の画像、最大 3 本の動画、最大 3 本の音声クリップを使用できます。参照動画が 1 本以上指定されている場合、画像は省略できます。
- 参照素材を認識するプロンプト：番号付きの画像、動画、音声プレースホルダーを使用し、アップロードしたメディアをプロンプト内で直接指定できます。
- 実用的な出力解像度：コストを重視する制作ワークフロー向けに、480p または 720p で生成できます。
- 柔軟な動画の長さ：4～15 秒のクリップを作成できます。
- 複数のアスペクト比：21:9、16:9、9:16、1:1、4:3、3:4 から選択できます。
- 任意の生成音声：音声はデフォルトで有効ですが、無音の結果が必要な場合は無効にできます。
- Seed パラメーターなし：Seedance V2.0 Mini モデルは Seed 制御に対応していません。
Seedance V2.0 Mini Reference-to-Video の使用方法
- プロンプトを作成する：目的のシーン、動き、カメラワーク、タイミング、指定した参照素材同士の関係を説明します。
- ビジュアル参照素材を追加する：画像または動画を 1 つ以上アップロードします。画像は 1～9 枚、動画は 0～3 本まで指定でき、画像リストを空にできるのは参照動画がある場合のみです。
- 任意の音声参照素材を追加する：音、リズム、音声、タイミングを出力に反映したい場合は、音声クリップを最大 3 本までアップロードします。
- プロンプト内でメディアを参照する：API ドキュメントに記載されている API プレースホルダー構文を使用し、「画像 1」「動画 1」「音声 1」などの番号付きプレースホルダーを指定します。
- 出力を設定する：480p または 720p、4～15 秒の長さ、対応する 6 種類のアスペクト比のいずれかを選択します。
- 音声を生成するか選択する：デフォルトで有効な音声をそのまま使用するか、無音動画を生成するために無効にします。
- リクエストを送信する：動画タスク API にリクエストを送信し、返されたタスク識別子を使用して生成ステータスを確認します。
参照動画を 1 本以上アップロードすると、生成料金は一律で 2 倍になります。アップロードした参照動画の本数や長さにかかわらず、倍率は同じです。
Seedance V2.0 Mini Reference-to-Video の最適なユースケース
- キャラクターと商品の一貫性：参照画像やクリップを使用し、新しいシーンでも識別可能なビジュアルの方向性を維持します。
- ソーシャルメディア動画：一般的な公開形式に合わせて、縦長、正方形、横長、シネマティックなクリップを制作します。
- 動きとカメラのガイダンス：参照動画を使用して、動き、テンポ、構図、カメラワークを伝えます。
- 音声ガイドによる制作：生成する映像を、指定した音楽、音声、効果音、タイミングの指示に合わせます。
- 迅速なクリエイティブ検証：高解像度での制作に進む前に、480p または 720p でマルチモーダルなアイデアをテストします。
注：すべてのリクエストに、画像または動画の参照素材を 1 つ以上含める必要があります。アップロードする各動画と音声クリップの長さは 2～15 秒でなければなりません。音声のみのリクエストには対応していません。
Seedance V2.0 Mini Reference-to-Video と競合モデルの比較
- Seedance V2.0 Reference-to-Video との比較：どちらも画像、動画、音声によるガイダンスに対応していますが、Mini モデルは標準モデルの高解像度オプションではなく、手頃な 480p と 720p の出力に重点を置いています。
- Wan 2.7 Reference-to-Video との比較：Seedance V2.0 Mini は、画像、動画、音声の参照配列を個別に指定でき、音声生成にも対応しますが、Seed 制御には対応していません。
- Vidu Q3 Reference-to-Video との比較：Seedance V2.0 Mini は動画と音声の入力を受け付けることで、参照ガイダンスを画像以外にも拡張しています。
- Seedance V2.0 Mini Text-to-Video との比較：Text-to-Video はプロンプトのみから生成しますが、Reference-to-Video では画像、動画、任意の音声入力を追加してマルチモーダルにガイドできます。
- Runway の動画モデルとの比較：Seedance V2.0 Mini は、1 回のリクエストで画像、動画、音声によるガイダンスを利用したいチーム向けに、直接使用できる Reference-to-Video API を提供します。
Flaq AIで複数のクリエイティブツールを探す
ブラウザで画像と動画のクイックワークフロー向けAI制作ツールを複数試し、成功したアイデアをFlaq AIの本番対応モデルAPIで拡張できます。Flaq AIはすべてのモデルに統合APIレイヤーを提供し、ワークフローを簡単に利用・拡張できます。
