2024-6-14 16:11

月之暗面CEO杨植麟:AI安全不一定最急迫,但需要我们提前去准备

今日举办的2024智源大会上,百川智能CEO王小川、智谱AI CEO张鹏、月之暗面CEO杨植麟、面壁智能联合创始人、CEO李大海共同出席《尖峰对话:通往AGI之路》环节。在谈及AI安全时,月之暗面CEO杨植麟表示,“AI安全是非常重要的,它可能不一定是当前最急迫,但是一个需要我们提前去准备的事情。”

杨植麟表示,因为随着模型的进展,Scaling Law的发展是每N个月算力乘10倍,这里你的智能会得到提升,是一个逐渐去适应的过程。“它不一定是当前最大的矛盾或者最紧急的事情,但它肯定是长期储备。”

在杨植麟看来,这里面最重要的是两个方面:第一,模型本身会因为用户本身有些恶意意图,导致它去做一些本来不应该做的事情。比如现在有研究在prompt里注入一些不太恰当的意图,这些需要去关注。第二,模型本身会不会有自己的motivation,这是跟训练方式相关的,包括能不能在模型的底层去注入比如AI的宪法,功能去框定它的行为,不管用户给什么指示,都不会违背这个宪法。

作者:文猛   来源:新浪科技

相关

本评论 更新于:2024-7-24 5:48:30
在C114 APP中与业内人士畅聊通信行业热点话题!