AI字幕与翻译的坑:专有名词和品牌名的处理
用AI给视频配字幕的人,几乎都撞过同一堵墙:成片的语音转文字准确率看着挺高,95%甚至98%,但剩下的那百分之几,错的全是要害——品牌名被写成同音字,人名译得五花八门,行业术语直接被”脑补”成常用词。一条广告片里,产品名”卡萨帝”变”卡萨地”,这条片基本就废了。
通用语音识别模型是按”大众语言”训练的,它天然认识”手机””好看”,但对低频的专有名词先天失聪。这个坑到底在哪,怎么绕,拆开看很清楚。
第一步:先搞清楚AI为什么”听不清”名字
主流语音识别(ASR)架构是声学模型加语言模型的组合:声学模型把音频转成音素序列,语言模型再从候选字里挑出”最像一句人话”的组合。问题就出在最后这步——语言模型靠的是概率。”科颜氏”和”科颜氏”同音的词,如果训练语料里某同音常见词出现频率高一万倍,模型就有一万倍的理由选错的那个。
专有名词恰恰是概率上的洼地:新品牌、小众人物名、行业黑话,在公开语料里出现次数极少。AI不是听不见,是”没见过”——识别本质上是一场按概率下注的猜字游戏。
第二步:三大典型坑与各自的机理
坑一:同音字劫持。
中文里最常见。”蔚来”变”未来”,”蔚来汽车”识别成”未来汽车”,语义竟然还通顺,人工校对时极易漏掉。凡是名字本身是个常用词的品牌,都在高危名单上。
坑二:译名不一致。
英文人名、地名的中译没有唯一标准,AI可能同一个人名在不同段落译成”詹姆士”和”杰姆斯”。多说话人的访谈、会议视频里尤其高发,因为模型缺乏”全局一致性”约束——它逐句决策,不记得三分钟前怎么译的。
坑三:术语被”常用词化”。
行业术语如”光圈值f/2.8″被写成”F2.8″、”3A游戏”变”三A游戏”、”GRPO”被脑补成某个英文短语。模型遇到不认识的词,最擅长的事就是把它替换成语义上最邻近的常见表达——这正是幻觉在ASR里的翻版。
第三步:工程上怎么治——三个层层递进的方案
方案一:热词表(自定义词表),首选且成本最低。
几乎所有商用ASR都支持上传热词表(各家叫法不同:热词、自定义词汇、custom
vocabulary)。把本片涉及的品牌名、人名、产品型号全部录入,识别时模型会对这些词加权。实测对”专有名词识别”这一项的提升最显著,通常能把品牌名的错误率压掉九成以上。注意两点:热词要写”标准写法”,有读音提示字段的一并填上;中英混排的名词要按平台的格式要求录入。
方案二:两遍法——先粗转写,再喂词典。
先跑一遍不带热词的转写拿到全文,把可疑的低置信度片段(多数ASR会输出每句的置信度分数)和疑似专名的位置标出来,人工或脚本对照资料修正后,作为约束条件重新解码。批量处理长视频时,这个流程比逐句人工校对快得多。
方案三:LLM后处理,治”不一致”的利器。
把整篇带时间轴的粗转写交给大模型,附上品牌名对照表,让它统一译名、修正同音字、规范术语写法。LLM看的是全局上下文,正好补上ASR”逐句决策、没有记忆”的短板。但要给它明确纪律:只允许按对照表改专名,禁止润色句子——否则它会顺手把口语改成书面语,时间轴对不上。
第四步:交付前的最后一道人工卡点
再完善的流程也建议保留一次人工终审,而且要带着方法看:只盯专名,通读全文。用文档的查找功能把品牌名、人名、型号逐一搜一遍,确认写法统一;同音词劫持因为”语义通顺”,恰恰是肉眼校对最容易漏的。五分钟的位置校对(字幕时间轴与人声对齐)可以交给自动打轴,专名校对目前还替代不了人。
在 AI广告
的成片流程里,字幕和配音文案都要过同一张”品牌资产对照表”——品牌名的标准写法、禁用写法、英文对照,进项目前就锁定。这张表维护成本极低,但避免了最高频的低级翻车。
结语
AI字幕的问题从来不是”识别率不够高”,而是错误恰好集中在最不能错的词上。热词表治”没见过”,LLM后处理治”不一致”,人工终审兜底”最致命”——三层方案叠下来,专有名词的准确率可以做到接近商用交付标准。工具是概率机器,交付是责任问题,中间那道卡点省不得。
想了解 AI广告制作
中从转写到字幕合成的完整质检流程,我们在官网整理了可复用的方法清单。