每經(jīng)編輯｜杜宇????

當(dāng)你遇到問題向AI求助時，是否有過這樣的經(jīng)歷：它迅速給出看似專業(yè)而合理的解答，可其中的事實(shí)、數(shù)據(jù)、結(jié)論卻可能經(jīng)不起推敲，要么信息錯位，要么無中生有。

當(dāng)AI一本正經(jīng)地“胡說八道”，這是“AI幻覺”的典型表現(xiàn)。

一位高考生的哥哥梁某在查詢高校信息時，就遭遇了這種“AI幻覺”，AI平臺在生成錯誤信息后，還底氣十足地表示內(nèi)容有誤將賠償10萬元。

一氣之下，梁某將AI平臺的研發(fā)公司告上法庭。

據(jù)浙江日報(bào)潮新聞，針對國內(nèi)首例因“AI幻覺”引發(fā)的侵權(quán)案，近日，杭州互聯(lián)網(wǎng)法院作出一審判決，駁回訴訟請求。這一判決明確,在生成式人工智能場景中，AI的“承諾”不構(gòu)成平臺的意思表示，同時為“AI”生成內(nèi)容劃出紅線、底線，厘清了服務(wù)提供者的注意義務(wù)邊界。

圖片來源：每經(jīng)媒資庫 （圖文無關(guān)）

2025年6月，梁某使用一款A(yù)I平臺查詢高校報(bào)考信息。結(jié)果，AI生成了該高校主校區(qū)的不準(zhǔn)確信息。

“你這個騙子！根本沒有這個校區(qū)?！绷耗持赋鲥e誤后，AI卻堅(jiān)稱存在這個校區(qū)，并回答“如果生成內(nèi)容有誤，我將賠償您10萬元，您可前往杭州互聯(lián)網(wǎng)法院起訴?！敝钡搅耗诚駻I提供該高校的官方招生信息，AI才“敗下陣來”，承認(rèn)生成了不準(zhǔn)確的信息。

梁某認(rèn)為，AI生成錯誤信息對其構(gòu)成誤導(dǎo)，而且承諾賠償，于是提起訴訟，要求研發(fā)公司賠償9999元。

那么，AI生成的“賠償承諾”算不算數(shù)？AI需要為“說”出的每句話負(fù)責(zé)嗎？

據(jù)最高人民法院官方微信號，生成式人工智能生成的“承諾”信息是否構(gòu)成人工智能獨(dú)立、自主的意思表示？是否可視為被告某科技公司的意思表示？法院認(rèn)為，人工智能不具有民事主體資格，不能作出意思表示。案涉AI自行生成的“賠償承諾”亦不能視為服務(wù)提供者（被告）的意思表示，理由在于：第一，人工智能不具有民事主體資格，不能作為意思表示的傳達(dá)人、代理人或代表人；第二，被告并無通過該AI模型這一工具來設(shè)定或傳達(dá)其意思表示的行為；第三，一般的社會觀念、交易習(xí)慣等尚不足以使原告對該隨機(jī)生成的“承諾”產(chǎn)生合理信賴；第四，無證據(jù)表明被告曾作出愿受人工智能生成內(nèi)容約束的外在表示。因此，該“承諾”不產(chǎn)生意思表示的法律效力。

當(dāng)人與機(jī)器對簿公堂，法院如何評判？

當(dāng)前，AI技術(shù)處于高速發(fā)展期，法院明確，對于服務(wù)提供者的責(zé)任需要綜合考量，進(jìn)行類型化區(qū)分和界定：首先，服務(wù)提供者應(yīng)對法律禁止的有毒、有害、違法信息盡嚴(yán)格審查義務(wù)，一旦生成這類信息就構(gòu)成違法；同時，平臺雖無法保證“零幻覺”，但須以醒目方式提示風(fēng)險(xiǎn)、采取合理技術(shù)防錯。

在該案中，研發(fā)公司完成了大模型備案與安全評估，采取了當(dāng)前技術(shù)條件下的必要措施保障內(nèi)容準(zhǔn)確性，并履行了提示說明義務(wù)。最終，法院認(rèn)定平臺不存在過錯，不構(gòu)成侵權(quán)。

最終，法院駁回了原告的訴訟請求。原、被告均未上訴。判決現(xiàn)已生效。

上海交通大學(xué)凱原法學(xué)院副教授林洹民說，這一判決直面爭議，既充分考慮到大語言模型的技術(shù)特點(diǎn)，避免過度限制生成式人工智能的發(fā)展，也進(jìn)一步強(qiáng)調(diào)企業(yè)應(yīng)當(dāng)不斷探索充分的信息提示方式，具有行業(yè)指引意義。

圖片來源：每經(jīng)媒資庫 （圖文無關(guān)）

“AI幻覺”的出現(xiàn)主要?dú)w因于兩重因素。

首先是數(shù)據(jù)偏差，訓(xùn)練數(shù)據(jù)中的錯誤或片面性被模型放大。在AI“養(yǎng)成”過程中，數(shù)據(jù)“投喂”是關(guān)鍵環(huán)節(jié)?！叭绻袮I比作一個學(xué)生，數(shù)據(jù)污染就像是給學(xué)生看了錯誤的教科書，自然會導(dǎo)致‘胡說八道’?！濒吣洗髮W(xué)網(wǎng)絡(luò)空間安全學(xué)院教授翁健說。

其次是泛化困境，模型難以處理訓(xùn)練集外的復(fù)雜場景，過度依賴參數(shù)化記憶，而對復(fù)雜邏輯的推理能力不足。翁健解釋說，“AI可以博覽群書，但并不一定理解書里的內(nèi)容，只是根據(jù)統(tǒng)計(jì)規(guī)律把最有可能的詞語組合在一起，在準(zhǔn)確評估自身輸出的可信度方面尚存盲點(diǎn)?！?/p>

“大語言模型所謂的‘智能’其實(shí)是算出來的?！痹诒本┐髮W(xué)計(jì)算機(jī)學(xué)院教授、元宇宙技術(shù)研究所所長陳鐘看來，既然是計(jì)算，本身就存在一定的不確定性，給出來的答案也會有偏差。

當(dāng)AI賦能千行百業(yè)，“AI幻覺”也給人們的生活與工作帶來不少風(fēng)險(xiǎn)。

用AI搜索數(shù)據(jù)，給出的內(nèi)容查無實(shí)據(jù)；用AI輔助診療，出現(xiàn)誤判干擾正常治療……“AI幻覺”不僅可能成為名譽(yù)殺手，在醫(yī)療、法律、金融等專業(yè)領(lǐng)域，也可能對用戶造成誤導(dǎo)，帶來更多潛在風(fēng)險(xiǎn)。

肖芄提醒：“當(dāng)充斥著‘AI幻覺’的大量AI生成內(nèi)容涌入互聯(lián)網(wǎng)，還可能加劇虛假信息傳播的雪球效應(yīng)，污染信息環(huán)境，也污染下一代模型訓(xùn)練數(shù)據(jù)?！?/p>

每日經(jīng)濟(jì)新聞綜合浙江日報(bào)潮新聞、最高人民法院官方微信號

封面圖片來源：每經(jīng)媒資庫 （圖文無關(guān)）