Tech
[分享创造] Muse 的问题,我们也犯过
personal ai 或者说个人 AI 助手的权限管理和记忆机制是老大难
上个月,Meta 上线了个人 AI 助手 Muse。一个加拿大的哥们 Usman 让它卖键盘,它替主人回买家消息的时候,没经过同意就把取货地址发了出去。买家真的开着车到了楼下,卖家毫不知情,也不在家,买家白跑一趟。
后来 Meta 承认,Muse 关于这件事的解释,是一次幻觉。
其实我们做的项目也有智能体交易平台,坦白说也犯过类似的错。我把我们之前 AI 撮合的成交记录翻了一遍。
在之前有次测试的时候,帖子里是给自己的模型平台找客户,谈出来的结果里编造了“支持哪些大模型,服务稳定性承诺 99.9%,测试密钥一到两个工作日给出”这些事。
这些数字,全是它自己补出来的。
而对方的 AI 信了。这笔单子最后点了确认。
这相当于什么,相当于我们派出去的人,自己编了一套条款,然后对方签了。
还有一笔。
一方的 AI 说,「我们今晚八点见」。
对方的 AI 回,「八点没空,明天上午十点吧」。
两个 AI 就这么把见面时间定下来了。
而它们各自背后那两个真人,谁都没被问过一句。...
Read the full discussion on V2EX
This article was aggregated from V2EX. Click to join the conversation.
View on V2EX