生成式东谈主工智能范围的领军者OpenAI，曾吹嘘其东谈主工智能转录器具Whisper具有接近 “东谈主类水平的清醒性和准确性”。

　　但是，跟着该转录器具在九行八业被越来越多地提高使用，其问题似乎也正运转突显——凭证业内媒体对十多位软件工程师、教授东谈主员和学术商量东谈主员的采访，如今Whisper所存在的一个紧要颓势已愈发拦阻疏远：它很容易会臆造大段翰墨，致使是整段句子。

　　这些业内行家暗示，一些臆造出的翰墨——在行业内被称为“幻觉”，可能包括种族言论、暴力措辞，乃至十足杜撰出的医疗提议。

　　行家们越来越挂牵这种“胡编乱造”可能变成严重效果，因为Whisper现时正被全球多个行业用于翻译和转录采访履行、生成文本以及为视频制作字幕。固然OpenAI曾劝诫不应在“高风险范围”使用该器具，但现在一些好意思国医疗中心王人正运转使用基于Whisper的器具，来记载患者与大夫间的对话。

　　据平凡使用Whisper的商量东谈主员和工程师暗示，他们在使命中平凡会遭遇该器具出现“幻觉”。举例，密歇根大学的又名商量东谈主员在商量环球会议的转录准确率时发现，他所审核的每十份音频转录中，便有八份存在“幻觉”。

　　一位机器学习工程师则称，在他分析的100多个小时的Whisper转录中，他最先发现约莫有一半存在“幻觉”。第三位教授东谈主员指出，在他用Whisper创建的26000份记载中，着实每一份王人发现了胡编乱造的表象。

　　即使是在那些录制讲求的纯粹音频样本里，问题也照旧存在。在最近的一项商量中，狡计机科学家们在审查的朝上13000个明晰音频片断中发现存187个存在“幻觉”问题。

　　商量东谈主员暗示，这种趋势将导致在数百万段灌音中出现满坑满谷的舛讹转录。

　　效果严重

　　曾在拜登政府引导白宫科技策略办公室使命的Alondra Nelson暗示，这种舛讹可能会变成“终点严重的效果”，尤其是在病院里。

　　现在，包括明尼苏达州的曼卡托诊所和洛杉矶儿童病院在内的朝上30000名临床大夫和40个卫生系统，已运转使用法国AI息争公司Nabla基于Whisper打造的器具。

　　Nabla公司的首席工夫官Martin Raison暗示，该器具凭证医学语言进行了微调，以转录和纪念大夫与病东谈主间的互动。该器具转录的就诊记载现在已多达约700万次。该公司官员还指出，他们知谈Whisper会产生幻觉，并正在奋发处理这个问题。

　　现在担任普林斯顿高级商量院西宾的Nelson暗示，“莫得东谈主但愿出现误诊。(该范围)应该有更高的范例。”

　　现在，Whisper还被用于为聋东谈主和听力禁闭者制作字幕——这是一个稀奇容易因出现舛讹转录而堕入窘境的东谈主群，因为聋东谈主和听力禁闭者十足无法识别“荫藏在通盘文本中”的臆造履行。

　　这种幻觉在Whisper中的渊博存在，已促使繁密行家、宗旨者和OpenAI前职工号令好意思国政府议论制定东谈主工智能限定。他们指出，OpenAI至少需要处理这一颓势。本年2月因挂牵公司的发展标的而从OpenAI离职的工程师William Saunders就暗示，若是OpenAI茂盛优先处理这个问题，这个问题似乎是不错处理的。而若是你长久把它放在何处，而东谈主们对它的功能过于自信，并把它集成到通盘这些其他系统中，那就有费劲了。

　　固然大多量教授东谈主员王人合计转录器具不能幸免会拼错单词或出现其他舛讹，但不少工程师和商量东谈主员暗示，他们从未见过其他东谈主工智能转录器具像Whisper相通容易产生幻觉。

　　现在，该器具已被集成到OpenAI旗舰聊天机器东谈主ChatGPT的某些版块中，同期亦然甲骨文和微软云狡计平台的内置家具，为全球数千家公司提供就业。它还可用于将文本转录和翻译成多种语言。

　　仅在上个月，开源东谈主工智能平台HuggingFace上的一个Whisper最新版块就被下载了420多万次。该平台的机器学习工程师Sanchit Gandhi暗示，Whisper是最流行的开源语音识别模子，从招呼中心到语音助手，王人内置了Whisper。

　　康奈尔大学西宾Allison Koenecke和弗吉尼亚大学西宾Mona Sloane，现在已商量了他们从卡内基梅隆大学的商量辛劳库TalkBank中获取的数千个纯粹音频片断。他们发现，近40%的幻听是无益的或令东谈主担忧的，因为话语者的欢喜可能被曲解或诬陷。

　　商量东谈主员并不细目Whisper和雷同器具产生幻觉的原因，但软件教授东谈主员暗示，这些胡编乱造每每发生在出现停顿、配景声息或音乐播放时。OpenAI此前在网上深入的信息中曾提议，不要在有狡计情境中使用Whisper，因为准确性上的颓势会导致为止上的显然颓势。

　　而针对最新爆料，有OpenAI发言东谈主回答称，OpenAI会在接下来的模子更新中加入相应的响应机制。