英伟达推出“护栏”软件以防止AI模型失控

英伟达(NVDA.US)的强大芯片为人工智能(AI)的繁荣奠定了基础。然而,随着ChatGPT等生成式AI的出现,越来越多用户在享受便利的同时发现,AI模型有时会出现“幻觉”,即说

英伟达(NVDA.US)的强大芯片为人工智能(AI)的繁荣奠定了基础。然而,随着ChatGPT等生成式AI的出现,越来越多用户在享受便利的同时发现,AI模型有时会出现“幻觉”,即说出错误的事实、涉及有害的话题或导致安全风险。为了解决这一问题,英伟达在周二发布了一款名为NeMo Guardrails的新软件,该软件能够为AI模型设置安全“护栏”,避免AI输出一些不良的内容。

资料显示,NeMo Guardrails是一个软件层,位于用户和AI模型之间,可以在模型输出不良内容之前进行拦截和修改。例如,如果用户需要一个针对特定方向的AI,就可以利用该软件来限制AI至输出对应方面的内容,而不谈论不相关的话题。

此外,该软件还能够利用一个AI模型检测另一个AI模型,如果两个模型输出的答案不一致,软件将直接输出“我不知道”的回答。通过这种方式,人工智能“胡说八道”的情况会得到有效降低,一些可能存在危险的回复也能够被直接拦截。

英伟达应用研究副总裁Jonathan Cohen表示:“每个人都意识到生成式大语言模型的力量,以一种安全可靠的方式部署它们非常重要。”英伟达将NeMo Guardrails作为开源软件提供,并将持续对其进行更新。

©本文为清一色官方代发,观点仅代表作者本人,与清一色无关。清一色对文中陈述、观点判断保持中立,不对所包含内容的准确性、可靠性或完整性提供任何明示或暗示的保证。本文不作为投资理财建议,请读者仅作参考,并请自行承担全部责任。文中部分文字/图片/视频/音频等来源于网络,如侵犯到著作权人的权利,请与我们联系(微信/QQ:1074760229)。转载请注明出处:清一色财经

(0)
打赏 微信扫码打赏 微信扫码打赏 支付宝扫码打赏 支付宝扫码打赏
清一色的头像清一色管理团队
上一篇 2023年4月26日 16:30
下一篇 2023年4月26日 16:30

相关推荐

发表评论

登录后才能评论

联系我们

在线咨询:1643011589-QQbutton

手机:13798586780

QQ/微信:1074760229

QQ群:551893940

工作时间:工作日9:00-18:00,节假日休息

关注微信