OpenAI的Whisper幻觉
研究人员对在医疗中心使用Whisper这一OpenAI的转录工具发出警告。在音频转录时频繁出现异常,导致显著错误。多项研究显示出现了虚假信息,这些被称为幻觉的现象中,出现了虚构的药物或不准确的陈述。
令人担忧的证据
一个开发人员和研究人员的团队发现Whisper在转录中产生虚假内容。例如,密歇根大学的一项研究显示,80%的音频转录包含事实错误。另一组计算机专家从对超过13,000个录音的分析中记录下了不少于187起幻觉。
在医疗领域的后果
在医疗环境中使用Whisper引发了严重的担忧。Nabla公司应用这一技术转录医疗访谈,已记录了大约七百万个转录。尽管发出了警告,但似乎没有任何内容验证系统到位,令人对收集的数据准确性产生质疑。
隐私和验证问题
隐私标准使专业人士确认转录真实性的能力变得复杂。根据Nabla的技术负责人马丁·雷松的说法,删除音频录音旨在确保数据的安全性。医疗提供者在这种情况下面临压力,其中80%的转录需要快速校对,这可能影响护理质量。
显著幻觉示例
幻觉案例证明了误解所带来的危险。例如,来自康奈尔大学和维吉尼亚大学的两位教授发现,约40%的幻觉可能会导致误导。简单的句子会转变,比如有一名男孩被描述拥有一把刀,显示出令人不安的改变。
对感知与解读的影响
偏见的表现和错误的解读损害了沟通。种族标准特别成为频繁的错误修改目标。示例包括关于种族身份的讨论变更,导致不利的社会和政治影响。
持续的技术热潮
尽管存在这些缺陷,围绕Whisper的热情依然存在。开源平台HuggingFace最近记录了超过420万次下载。它在Oracle和Microsoft等系统中的整合证明了日益增长的采纳,引发了关于AI设计者责任的质疑。
迈向更大的责任
随着转录技术的发展,呼吁加强监管的声音不断增加。确立在敏感领域使用AI的标准的必要性逐渐明确,以确保信息的质量并加强对个体的保护。
关于OpenAI的Whisper的常见问题解答
OpenAI的Whisper是什么?
Whisper是由OpenAI开发的自动转录工具,旨在使用人工智能算法将语音转化为文本。
Whisper如何提高音频转录的质量?
Whisper利用先进的语音识别技术理解上下文,并生成更准确的转录,但它也存在生成错误或幻觉的风险。
为什么Whisper的转录中可能出现幻觉?
转录中的幻觉发生在AI模型构造出未被说出的信息,这可能是由于理解错误或训练数据的局限性所导致。
在医疗行业使用Whisper的风险是什么?
在医疗转录中使用Whisper可能导致严重错误,因为虚假或虚构的信息可能影响临床决策和护理质量。
如何验证Whisper生成的转录的准确性?
目前没有可靠的方法可以验证转录的准确性,因为该工具出于隐私原因删除了音频,使第三方验证变得困难。
Whisper是否被医疗机构使用?
是的,Whisper被许多临床医生和医疗机构使用于医疗转录工具中,但其使用因潜在的幻觉问题而引发担忧。
Whisper对医疗专业人员的生产力有什么影响?
尽管Whisper可以加快转录过程,但错误的风险往往需要专业人员审核和修正转录,可能抵消节省的时间。
Whisper是否对开发者开放?
是的,Whisper作为开源软件可用,允许开发者将该技术集成到自己的应用程序和服务中。
Whisper如何处理不同的口音和方言?
Whisper设计用于识别多种口音和方言,但转录的准确性可能会因使用的模型和输入数据而有所不同。
Whisper与其他转录工具有什么不同?
主要区别在于Whisper的先进算法试图理解整体上下文,而某些工具则严格专注于单词的转录而不进行解释,存在幻觉的风险。