【點(diǎn)評(píng)】
所謂AI幻覺,可以通俗地理解為AI也會(huì)像人產(chǎn)生心理幻覺一樣,遇到不熟悉或超出“知識(shí)儲(chǔ)備”的問題時(shí),編造一些并不存在的細(xì)節(jié),生成與事實(shí)相悖的答案。一項(xiàng)調(diào)研顯示,對(duì)于“公眾認(rèn)為使用AI應(yīng)用過程中有哪些突出問題”,反饋?zhàn)疃嗟氖?ldquo;內(nèi)容不準(zhǔn)確,或含虛假信息”,占比高達(dá)42.2%。
AI幻覺從何而來?可能得從源頭尋找答案。
大模型的工作原理,是基于概率生成內(nèi)容。給它上半句,它就根據(jù)自己“學(xué)”過的海量知識(shí),“算出”下半句該說什么。比如,當(dāng)用戶輸入“今天天氣非常”,它大概率會(huì)接“不錯(cuò)”“熱”“潮濕”等答案,而不會(huì)出現(xiàn)“甜”。同時(shí),大模型又不是簡(jiǎn)單地儲(chǔ)存所有事實(shí),而會(huì)像人腦記東西那樣,進(jìn)行大量壓縮和泛化——也就是“抓概要、找規(guī)律”。因此,當(dāng)“喂給”大模型的訓(xùn)練數(shù)據(jù)包含虛假信息時(shí),它就會(huì)產(chǎn)生“幻覺”、給出錯(cuò)誤答案。
有報(bào)告顯示,我國生成式人工智能產(chǎn)品用戶規(guī)模達(dá)2.49億人。用戶規(guī)??焖僭鲩L,AI幻覺潛藏的風(fēng)險(xiǎn)也隨之增加。比如,如果一些看似合理卻與現(xiàn)實(shí)相去甚遠(yuǎn)的內(nèi)容被AI反復(fù)學(xué)習(xí),會(huì)形成“數(shù)據(jù)污染—算法吸收—再污染”的惡性循環(huán)。有效防范由此帶來的虛假信息泛濫,已成為不容回避的課題。
不過也有觀點(diǎn)認(rèn)為,AI幻覺可被視作一種“發(fā)散思維”和“想象力”。理論上,如果把訓(xùn)練一個(gè)大模型看作信息“壓縮”的過程,那么大模型經(jīng)過推理、輸出答案就是一個(gè)信息“解壓”的過程。這種處理信息的方式,可能會(huì)出現(xiàn)謬誤,也可能觸發(fā)新的創(chuàng)造。對(duì)發(fā)展尚未定型的新事物,要保持開放心態(tài),辯證看待其利與弊,在有效防范弊端的同時(shí),給予足夠空間使之朝好的方向成長。
短時(shí)間內(nèi),AI幻覺問題難以被解決。各方都在努力降低其負(fù)面影響,相關(guān)部門也加大了對(duì)違規(guī)AI產(chǎn)品的處置力度,推動(dòng)生成合成內(nèi)容標(biāo)識(shí)加速落地。一些大模型廠商在積極行動(dòng),比如文心大模型利用檢索到的信息來指導(dǎo)文本或答案的生成,提高了內(nèi)容的質(zhì)量和準(zhǔn)確性;通義大模型加強(qiáng)訓(xùn)練語料管理,通過“紅藍(lán)對(duì)抗”機(jī)制提升對(duì)虛假信息的識(shí)別能力。對(duì)廣大用戶而言,則要加快提升AI素養(yǎng),學(xué)會(huì)“智慧”地運(yùn)用“智慧工具”,既借助大模型破除思維定式、啟發(fā)創(chuàng)新思路,又提高自身有效獲取、理解、評(píng)估和使用信息的能力。
人類塑造工具,工具也影響人類生活。應(yīng)對(duì)AI幻覺等問題挑戰(zhàn)的過程,既促使人們思考改進(jìn)工作方法,也為AI不斷進(jìn)化提供了源動(dòng)力。激發(fā)新技術(shù)的正向價(jià)值,讓AI更好融入生產(chǎn)生活、賦能千行百業(yè),我們邁向智慧時(shí)代之路才能走得更加穩(wěn)當(dāng)、更加順暢。
標(biāo)簽:
  江蘇宿遷固能科技有限公司積極探索機(jī)器人與AI技術(shù)的深度融合,在生產(chǎn)過程中實(shí)現(xiàn)工藝自動(dòng)化和智能化,大大提高了生產(chǎn)效率和產(chǎn)品
4月24日是第十個(gè)中國航天日。中國商業(yè)航天正迎來技術(shù)突破和規(guī)模爆發(fā)的雙重拐點(diǎn),太空經(jīng)濟(jì)從愿景正走向現(xiàn)實(shí)。商業(yè)航天,一般指以市場(chǎng)化方式
  4月24日,由中國軟件行業(yè)協(xié)會(huì)主辦的第四屆中國國際軟件發(fā)展大會(huì)在京舉辦。本屆大會(huì)以人工智能與軟件變革為主題,深入探討人工
2025嘉興馬拉松比賽上,宇樹科技機(jī)器人在現(xiàn)場(chǎng)同觀眾互動(dòng)?!≌掠聺龜z智澄英達(dá)研發(fā)的智能復(fù)合型人形機(jī)器人TR4正在進(jìn)行化學(xué)試驗(yàn)。 智澄英達(dá)
人工智能(AI)正以前所未有的姿態(tài)改變世界,旅游業(yè)也不例外。從智能篩選旅行目的地,到特色美食推薦;從預(yù)訂航班到選擇酒店;從需求預(yù)測(cè)、
【現(xiàn)象】使用人工智能大模型時(shí),不少人或許都遇到過類似問題:它們有時(shí)會(huì)捏造細(xì)節(jié),甚至一本正經(jīng)地胡說八道。比如,讓它推薦書,給出的卻是
7月1日,國家航天局發(fā)布行星探測(cè)工程天問二號(hào)探測(cè)器在軌拍攝的地月影像圖。近期,天問二號(hào)探測(cè)器配置的窄視場(chǎng)導(dǎo)航敏感器,分別對(duì)地球和月球
 近日,《政務(wù)數(shù)據(jù)共享?xiàng)l例》(以下簡(jiǎn)稱《條例》)正式出臺(tái),并將于2025年8月1日起施行。該《條例》首次從國家層面以行政法規(guī)形式對(duì)政
 作為引領(lǐng)新一輪科技革命和產(chǎn)業(yè)變革的戰(zhàn)略性技術(shù),人工智能(AI)應(yīng)用場(chǎng)景廣闊,市場(chǎng)空間巨大,深刻改變著人類生產(chǎn)生活方式。從手機(jī)應(yīng)
  江蘇宿遷固能科技有限公司積極探索機(jī)器人與AI技術(shù)的深度融合,在生產(chǎn)過程中實(shí)現(xiàn)工藝自動(dòng)化和智能化,大大提高了生產(chǎn)效率和產(chǎn)品
 人工智能是引領(lǐng)新一輪科技革命和產(chǎn)業(yè)變革的戰(zhàn)略性技術(shù),具有溢出帶動(dòng)性很強(qiáng)的頭雁效應(yīng)。習(xí)近平總書記對(duì)人工智能和制造業(yè)發(fā)展作出重要
 無人駕駛公交車在城市中軸線上絲滑行駛,自動(dòng)駕駛清掃車在街道上穿梭工作,無人售貨車在廣場(chǎng)上招手即停……近日,記者在鄂爾多斯市康
前不久,某知名服裝品牌試衣鏡相關(guān)話題登上熱搜榜,引發(fā)廣泛關(guān)注。不少網(wǎng)民懷疑該品牌店內(nèi)的試衣鏡自帶特效,使消費(fèi)者在試衣時(shí)呈現(xiàn)出更好的
 工業(yè)和信息化部日前公布,1至5月,我國規(guī)模以上互聯(lián)網(wǎng)和相關(guān)服務(wù)企業(yè)互聯(lián)網(wǎng)業(yè)務(wù)收入穩(wěn)定增長,完成互聯(lián)網(wǎng)業(yè)務(wù)收入7735億元,同比增長
為規(guī)范網(wǎng)信部門行政處罰行為,保護(hù)公民、法人和其他組織的合法權(quán)益,近日國家互聯(lián)網(wǎng)信息辦公室發(fā)布《網(wǎng)信部門行政處罰裁量權(quán)基準(zhǔn)適用規(guī)定》
旗袍,中國和世界華人女性的傳統(tǒng)服裝,被譽(yù)為中國國粹和女性國服。雖然其定義和產(chǎn)生的時(shí)間至今還存有諸多爭(zhēng)議,但它仍然是中國悠久服飾文化
7月21日,北京市政府發(fā)布《北京市電影局關(guān)于在疫情防控常態(tài)化條件下有序推進(jìn)電影院恢復(fù)開放的通知》,宣布全市低風(fēng)險(xiǎn)地區(qū)影院,可于7月24日
?武漢7·16渡江節(jié)組委會(huì)14日發(fā)布公告,由于長江武漢關(guān)水位超警戒水位,按照規(guī)定取消2020年第46屆武漢7·16渡江節(jié)。受近期持續(xù)強(qiáng)降雨影響,
過去一段時(shí)間,國家級(jí)非遺項(xiàng)目灰塑傳承人邵成村,多次在陳家祠等工作現(xiàn)場(chǎng),向身邊那些帶著好奇目光的人們講解灰塑的種種技術(shù)細(xì)節(jié):草根灰、
7月13日,位于璧山區(qū)南門唐城夜市街區(qū)的璧山冷酒夜市開街。這是璧山區(qū)打造夜間經(jīng)濟(jì)消費(fèi)載體、培育夜間經(jīng)濟(jì)活動(dòng)品牌的舉措之一。璧山市民一