Seed Audio 1.5 提示词指南

Seed Audio 1.5 提示词指南

了解怎么给 Seed Audio 1.5 写提示词:搭建场景提示词,选择四种输入模式,用时间戳安排声音,用参考音频给角色选声,为视频配音,以及使用分轨输出。另附它与 Seed Audio 1.0 的差别。

Seed Audio 1.5 是 ByteDance 的下一代整场景音频模型,即将登陆 Morphic。一条提示词就能返回对白、音乐、环境音和音效,各自独立成轨,最长六分钟。本指南讲怎么给它写提示词。想马上试写场景提示词,可以打开 Seed Audio 1.5 AI 音频生成器。

Seed Audio 1.5 提示词的结构

按听众听到的顺序来写场景:身在何处、谁在说话、说了什么,然后是周围发生了什么。先写故事,再列声音。

部分写什么示例
场景地点、时间、天气、房间大小[夜晚。空荡荡的站台,雨点打在雨棚上。]
人声名字、年龄、口音、情绪、语速Mara(30 多岁,平静,疲惫)
台词确切的原话,放在引号里“末班车已经开走了。”
音效声源,以及它怎么移动[脚步踩过湿漉漉的水泥地,渐渐远去。]
音乐风格、乐器、情绪、音量[一层低沉的合成器铺底,垫在所有声音下面。]
时间关键处写上时间戳[0:06] 脚步声响起。
雨夜里空荡荡的站台,末班列车正驶离
完整的场景提示词
[Night. An empty train platform, rain on the roof, a low synth pad.] Mara (30s, calm, tired): "Last train's gone." Jonah (40s, dry, amused): "Then we walk." [Footsteps on wet concrete, fading into the rain.]
后门被风吹开,食谱卡片飞起,厨房里的水壶冒着热气
时间戳
[0:00–0:03] A kettle starts to whistle, rising. [0:03] Nora (warm, calling out): "Tea's ready!" [0:06] The back door bangs open in the wind.
黄昏的篝火旁有一只木箱,上面放着一顶凹陷的头盔和一张折叠的地图
声音参考
[Reference 1 = Captain] Captain (reference 1; tired, slow, a sigh before the line): "We hold this hill until sunrise." [Campfire crackles, distant wind.]

Seed Audio 1.5 还没有发布,所以这些样本是在 Morphic 上制作的:人声和音效来自 ElevenLabs,音乐来自 Lyria,再按每条提示词混音对齐。

Seed Audio 1.5 的四种输入模式

每种模式都从文本提示词开始。你再往里加什么,决定模型自己发挥多少,又照着你给的做多少。

模式额外加什么最适合
文本什么都不加:由提示词描述每个声音和音效初稿、广告、声音铺底
文本 + 音频最多六段声音参考片段固定的角色阵容,或你一直在用的旁白
文本 + 视频一段模型能看的视频配音、给成片配乐、按画面做声音设计
文本 + 音频 + 视频视频加声音参考多集内容保持同一批角色声音的配音,比如连续短剧

Seed Audio 1.5 的时间戳

Seed Audio 1.0 能给台词指定时间窗口,比如 [5.5s:8.0s]。Seed Audio 1.5 把时间戳扩展到了音效和音乐提示点。这样一声门响、一记重音或一段渐强,会落在你指定的位置,而不是模型猜的位置。

  • 只给必须对上画面的节拍定时间:踩在剪辑点上的台词、对准撞击的音效、落在揭晓时刻的渐强。
  • 其余的不写时间。房间底噪和背景音乐由模型自己安排,听起来更自然。
  • 时间戳按先后顺序写,台词之间留一点空隙,免得话音意外重叠。

[0:00] 老茶馆里,茶客低声闲聊。[0:04] 惊堂木“啪”地一拍。[0:05] 说书人(沉稳,压低声音):“各位看官,今天接着讲。”[0:09] 一声二胡的长音。

Seed Audio 1.5 的声音参考

最多可以加六段参考片段,一个角色一段,并在提示词里给每段打上标记,让模型知道哪个声音说哪句台词。参考音频决定声音听起来像谁,提示词决定怎么演。

要指导什么怎么写
情绪(参考音 2;受了伤,强忍着泪水)
风格(参考音 1;干巴巴的,克制,带一点笑意)
语速(参考音 3;很慢,句与句之间停顿很长)
非语言声音(参考音 1;台词前叹一口气,台词后轻轻一笑)

请使用干净的录音,并且是你有权使用的声音。使用真人的声音,需要征得本人同意。

用 Seed Audio 1.5 给视频配音和翻译

夜晚村庄广场上的露天电影院,一块拉在石屋之间的幕布上正放着电影

给 Seed Audio 1.5 一段视频,它会写出贴合画面动作的旁白、音乐、音效和环境音,并且对整段片子的上下文保持连贯。翻译时,它会替换说话的语言,保留原来的音效和音乐。做短剧、课程或带货视频的多语言版本时,用得上这一功能。

  • 描述每位说话人的声音,或加一段参考音频,让每种语言的配音都保持同一批角色。
  • 写明要保留什么,比如“保留原来的音乐和音效,只替换对白”。
  • 发布之前,请熟悉该语言的人核对发音、意思和措辞。

在 Morphic 上,现在就可以用 AI 视频配音翻译视频并重新配音。配音与本地化教程则讲了字幕、Lip Sync 和最后的剪辑。

把对白翻译成英语,保留原来的音乐和音效。旁白:温暖放松,语速和原片一致。

Seed Audio 1.5 的分轨输出

Seed Audio 1.0 返回的是一个混好的文件。Seed Audio 1.5 把对白、环境音、音效和音乐分成独立的轨道返回,还能按声音拆分对白。点击播放,听一段风暴场景,播放时可以静音或单独收听任意一条轨道。每个声音各占一条轨道。

风暴中的灯塔
0:00 / 0:14
0s2s4s6s8s10s12s14s
守塔人声音 1
学徒声音 2
环境音海浪、风声、雨声
音效门响、雷声
音乐弦乐
剪辑时分轨能让你做什么
音量在台词下面把音乐压低,不用碰人声
静音去掉音效,得到更安静的版本;或去掉对白,得到预告片的铺底
替换换掉某个角色的一句台词或某个提示点,其余场景原样保留
复用把同一段环境音铺到下一场戏下面,让地点听起来是连续的

Seed Audio 1.5 与 Seed Audio 1.0:有什么变化

ByteDance 在 Seed Audio 1.0 页面上,把视频输入、更长的音频和多轨输出列为下一步。据 Segmind 上列出的预发布简介,Seed Audio 1.5 把这三项都带来了。

Seed Audio 1.0Seed Audio 1.5
单次生成时长2 分钟6 分钟
声音参考3 段6 段
语言20 种30 种
输入文本、音频参考、一张图片新增视频
输出一条混好的音轨对白、环境音、音效和音乐分轨
时间戳对白台词台词、音效和音乐提示点
带歌词的歌曲不支持支持

大多数 Seed Audio 1.0 的提示词可以原样沿用。想看 1.0 提示词的完整细节,请见 Seed Audio 1.0 指南。

常见问题

Seed Audio 1.5 能在 Morphic 上用吗?

它即将登陆 Morphic。现在就可以用 Seed Audio 1.0 做完整的场景,也可以在同一个 Canvas 上用 ElevenLabs、Lyria 和其他音频模型。

Seed Audio 1.5 什么时候上线?

Seed Audio 1.5 即将推出。ByteDance 已向合作伙伴分享了功能集,但还没有开放公开访问。在此之前,Seed Audio 1.0 已在 Morphic 上线。

我写过的 Seed Audio 1.0 提示词还能用吗?

能用。场景、人声、台词和音效的结构是一样的。想用上新功能,就加一段视频、更多声音参考、给音效和音乐加时间戳,或者要求返回分轨。

提示词和台词该用中文还是英文写?

台词写成你想听到的语言。场景和声音说明如果用英文写更方便,也可以。但每句台词要用目标语言写,并请熟悉该语言的人审听结果。

Seed Audio 1.5 能复制真人的声音吗?

只有征得本人同意才行。ByteDance 的限制会拦截未经同意、可辨认的真人声音模仿,也会拦截受版权保护的内容和已有的歌词。参考片段应当是你有权使用的录音。