音频

Mirelo SFX 2.0:一句话生成音效和环境声

Mirelo SFX 2.0 把文字描述变成音效或环境声。如何像声音设计师一样写提示词,以及负面提示词和种子的用法。

阅读约 1 分钟
两半中空的棕色椰子壳切面朝下放在暗色桌面上,侧面打来柔和的紫色光,笼罩在淡淡的紫色薄雾中

拟音师们有个出名的做法:把两半椰子壳互相敲击,模仿马蹄声。Mirelo SFX 2.0 省掉了椰子:你用文字描述声音,它返回一个音效或环境声的音频文件。模型页面上的示例很能检验它的本事:一架外星飞船单次飞掠,从远处的隆隆声开始,在头顶膨胀成涡轮的轰鸣,随着多普勒效应音调下降,然后渐渐远去。这是一个有开头、中间和结尾的声音,用一段话写成。

它能生成什么?

两类东西。事件音:摔门、拔剑出鞘、飞掠、玻璃碎裂。环境底音:铁皮屋顶上的雨声、热闹的咖啡馆、森林里的风声、飞船引擎舱的嗡鸣。时长滑块从十分之一秒到十分钟,默认 30 秒,所以短促的咔哒声和场景用的长循环都能在一个模型里完成。

提示词应该怎么写?

像声音设计师的需求说明,而不是像图片说明文字。有四点决定成败:声源(是什么发出声音)、动作(按顺序发生了什么)、空间(小房间、大教堂、户外)以及距离(近在耳边、隔着一条街)。飞掠示例四点俱全,这就是它奏效的原因。

提示词
石砌城堡大厅里一扇厚重的木门被缓缓推开:老旧铰链发出干涩的吱嘎声,接着门撞到墙上,发出一声低沉的闷响。宽大而有回响的石室,离听者很近。
时长:4 秒。句子里事件的顺序就是你听到它们的顺序。
提示词
夜里持续的雨落在波纹铁皮屋顶上,偶尔有更猛的阵雨,附近的排水槽在滴水,远处传来两次滚滚雷声。平静、连续,在一间小木棚里面录制。
时长:背景底音用 120 秒。写上“连续”,这样它不会逐渐推向高潮。
提示词
一台复古科幻电脑终端:柔和的电子啁啾声、继电器的咔哒声和低沉的风扇嗡鸣,每隔几秒响起一声短促的上扬提示音。小型控制室,近距离。
时长:30 秒。适合垫在游戏菜单或控制室场景下面。

负面提示词有什么用?

把偷偷混进来的东西挡在外面。要一条繁忙的街道,你可能会得到一声不想要的汽车喇叭,或者咖啡馆里的人声。负面提示词位于高级设置下,它自己的提示列出了常见的嫌疑对象:音乐、人声、交通。对于垫在对白下面的环境声,在那里填上“人声、说话、音乐”能让底音保持干净,只有你的演员在说话。负面提示词指南针对图片和视频更深入地解释了这个思路;在这里道理相同。

怎样得到同一声音的不同版本?

使用种子。留空时,每次运行都是一个新的随机版本,探索阶段正需要这样。听到喜欢的版本后,设定它的种子并保持不变,再调整措辞:结果的变化只会和你措辞的变化一样多。一款游戏需要五个相似但不完全相同的脚步声;保持提示词不变,只改种子,改五次。关于种子的文章用图片解释了同样的思路。

应该选择哪种文件格式?

WAV 是默认格式,未经压缩,适合在视频或音频软件中编辑。FLAC 同样无损,体积更小。MP3 和 AAC 适合网页或快速预览,这两种格式可以设置 32 到 320 kbps 之间的码率;留空则自动编码。

它做不到什么?

它专为音效和环境声而做,它的描述也只承诺这些:要做歌曲或一句台词,请改选音乐或语音模型。它也不会看你的视频。让声音精确对上玻璃落地的那一帧,是同一模型的视频转音频版本 Mirelo SFX 2.0 视频转音频的工作,它会聆听画面。如果想要另一个支持循环环境声的文本转音效模型,请看音效 V2 指南,所有音频模型都在模型页面上。

常见问题

Mirelo SFX 2.0 的声音最长可以多长?

从十分之一秒到十分钟。滑块默认 30 秒。

它能生成音乐或人声吗?

它是为音效和环境声而做的;音乐和人声请用音乐或语音模型。在负面提示词里填上音乐和人声,可以让它们远离底音。

哪种格式最适合视频剪辑?

WAV(默认),如果想要更小的无损文件就用 FLAC。网页用途请用 MP3 或 AAC。

#音频#模型#音效

继续阅读

全部文章 →