FCP AI-Toolkit 1.1.1 发布:1.1,外加两项修复
1.1.1 已登陆 Mac App Store,带来 Smart Cache、字幕编辑、Smart Search 和约 100 种语言。多出来的“.1”,是为了两个及时修复的 bug。
FCP AI-Toolkit 1.1.1 已于 9 月 30 日登陆 Mac App Store。如果你正在使用 1.0 版本,这就是你的更新。像往常一样,打开 Mac App Store 更新即可。
这次更新只围绕一件事:回到一份剪辑时,不必从头再来。你换一种风格、修剪开头、改一个名字、延长一个片段,字幕都能跟上你,而不是每次都从零开始。
等等,1.1 去哪了?
问得好。9 月 22 日,我们发布了一篇预告,标题是 1.1 即将到来。1.1 版本当时已经完成并检查过,只等它的发布视频。
随后在 9 月 25 日,我们在真实的 Final Cut Pro 项目上做了最后一轮测试:多个片段、分离的音频,还有真实剪辑里常见的各种杂乱情况。结果发现了两个 bug,我们当天就都修复了。
我们本可以先发布 1.1,之后再打补丁。但我们更愿意先修好这个版本,再给它一个新的编号。所以 1.1.1 就是 1.1 加上两项修复。功能与预告中描述的完全一致,多出来的“.1”代表我们在你遇到之前就发现的两个 bug。
我们在 9 月 27 日把 1.1.1 提交给 Apple,9 月 30 日上线。没有人错过任何版本:公开发布的 1.1 从未存在。如果你用的是 1.0,直接更新到 1.1.1 即可。
- 1.0 版本发布
- 1.1 已预告,等待发布视频
- 最后一轮测试发现两个错误,当天全部修复
- 1.1.1 提交 Apple 审核
- 1.1.1 已在 Mac App Store 上架
第一项修复:叠在一起的字幕
点击 Analyze 后,扩展会分别转录时间线上的每个对白片段,再把结果合并起来。在某些项目中,这可能导致同一句话出现两次,或者字幕叠在一起。我们找到了三种可能的原因:
- 被修剪的片段。 你在时间线上裁掉了片段开头,但被隐藏、被裁掉的那部分语音仍可能变成字幕出现。
- 两个片段包含相同的语音。 比如相机录下的音频,加上单独的麦克风,两者都被标记为对白。同样的话就可能出现两次。
- 语音模型本身。 Whisper 有时会返回略有重叠的字幕行。
这本身就够烦人的。而 1.1.1 还带来了字幕编辑器,编辑器做了一件很合理的事:它会拒绝任何会让字幕与相邻字幕重叠的时间修改。重复的字幕本来就已经重叠,所以你做的每一次修改都会被拒绝。你会卡住,编辑器仿佛被锁死了。
现在的处理方式是:
- 每个片段的字幕只保留你在时间线上实际看到的那部分,同时不会把一个词从中间截断。
- 重复的语音会合并为一条字幕。
- 剩下的任何重叠都会被干净地拆开。
- 修复之前保存的字幕,会在加载时自动修复。
此外,每条字幕上新增了 删除按钮 。如果有一行你根本不想要,直接删除即可,下次打开也不会再出现。
第二项修复:音频不在我们以为的位置
这一项与已从视频中分离的音频,或位于连接片段上的音频有关。常见的情况是来自单独录音设备的声音,连接在你的主片段上。
在这类项目中,扩展可能会读错时间线上的位置。在我们的一个测试项目里,分离出来的音频比视频更长。只有视频长度的部分被转录,而且两个来源相差 1.6 秒。字幕因此逐渐与声音不同步。
现在,嵌套片段和连接片段的位置都能正确计算。连接片段按它自己的故事情节来测量,而不再被裁成所依附片段的长度。视频片段的画面也不会再被误认为音频来源。音频角色、已停用的片段和已关闭的音频声道也都会被遵守。
这两项修复都来自同一个地方:真实项目。我们很庆幸又多测试了一轮。
Smart Cache:不必从头开始
Smart Cache 会在你的 Mac 上记住哪些内容已经转录过。
想象一下:你为一段访谈做好了字幕,也很满意。接着客户要求结尾再加十秒。你在时间线上延长片段,再次点击 Analyze。只有新增的、尚未转录的部分会交给 Whisper 处理,其余的早已就绪。
用相同的语言和相同的模型再次处理同一个片段,字幕会立刻出现。这在剪辑还在不断调整时很有帮助:换一种风格、重新运行、修剪、延长,都不必让字幕处理从头开始。
Smart Cache 默认开启。如果想关闭,扩展里有一个开关。一个片段第一次处理所需的时间不会变,这取决于你的 Mac、你的片段和模型。Smart Cache 帮的是第二次,而不是第一次。
字幕上时间线之前,先改好
再好的语音模型,也可能把嘉宾的名字写成它自己的样子。现在,在标题落到时间线之前,你可以直接在扩展里纠正一个名字、一个标点,或者整句话。
你还可以修改每条字幕的起止时间。编辑器会在你操作时检查时间。它会拒绝无效的时间范围,以及与相邻字幕重叠的字幕,因此一个小小的改动不会悄悄破坏整个序列。
你的修改会保存在 Mac 上。再次打开扩展,或再次分析同一份媒体时,修改都会还在。而 1.1.1 的新功能是,你可以删除不想要的字幕。
Smart Search:那句话我在哪儿说的?
你记得自己说过关于镜头的话,却想不起是在哪个视频里。Smart Search 会在你生成的每条字幕中查找,覆盖所有片段。每条结果都会显示匹配的文本、文件名和时间码。
搜索也会识别你的修正。如果你改过一个名字,就能用改正后的名字找到它。
有一个需要坦白的限制:点击搜索结果不会跳转到 Final Cut Pro 中的片段。你会得到文件名和时间码,需要自己前往查看。
约 100 种语言,以及 Auto Detect
1.0 版本的语言选择器只有 20 种语言。现在,语言菜单列出了 Whisper 模型目录中全部约 100 种语言。顶部还新增了一个选项:Auto Detect。如果你不确定片段里说的是哪种语言,或者不同片段的语言混杂,就交给它来判断。模型下载完成后,Auto Detect 同样在你的 Mac 上运行。
请认真阅读这一段。这个数字是模型覆盖的语言范围。我们没有在每种语言中分别测试字幕质量。字幕的准确程度取决于语言、录音、说话者和模型。因此,无论哪种语言,检查字幕都仍是工作的一部分。有了新的编辑器,这件事也会更快。
更小的窗口
扩展现在可以适应较小的 Final Cut Pro 窗口,比如笔记本电脑的屏幕。项目拖放区、搜索和模板选项都能正常操作。
保持不变的部分
- 转录依然在你的 Mac 上运行。 我们使用 WhisperKit,它基于 OpenAI 的 Whisper。你的影像不会上传到云端转录服务。语音模型只需下载一次,下载时需要联网。App Store 购买和订阅检查同样需要联网。
- 同样的五款模板。 Basic、Highlighted、Highlighted with Background、Pop 和 Beast Pop。字体、颜色和位置依然可以调整。
- 同样整齐的结果。 你的标题仍会归入一个复合片段,放置在次要故事情节中。
- 同样的定价方式。 应用可免费下载,模板免费。自动生成 AI 字幕需要有效的月度订阅。最新价格请查看 Mac App Store 页面.
本次更新不包含的内容
免得你猜测:1.1.1 不支持导出 SRT 或其他字幕文件,没有文本转语音,也没有自动上传到 YouTube。搜索查找的是文字,而不是画面或含义,所以没有视觉搜索或语义搜索。另外,如前所述,点击搜索结果不会跳转到片段。
我们已经在准备下一次更新。在这里我们不做任何承诺,等它准备好了再告诉你。
下载、观看,并告诉我们你的想法
要更新,请打开 Mac App Store 并安装 FCP AI-Toolkit 1.1.1。App Store 页面现已提供 10 种语言,还配有一段简短的预览视频。
想看实际效果,请观看 YouTube 上的发布视频。我们的首批视频(一支发布视频和 Shorts)发布在 YouTube 和 Instagram 上(以 Reels 形式)。我们同样在 TikTok上。想了解我们一路走来的历程, 1.0 版文章 和 1.1 预告 依然保留在线上。
如果你的项目里有什么地方不能用,或者你有好点子,请写信给 help@fcp-aitoolkit.com。真实项目里的真实问题,是我们能得到的最好测试。我们正是这样发现了这两个 bug。
感谢你使用 FCP AI-Toolkit。
Powered by Soleach Digital Agency