“AI伙伴”應(yīng)在規(guī)范中成長


中國產(chǎn)業(yè)經(jīng)濟(jì)信息網(wǎng)   時間:2026-01-09





  日前,國家互聯(lián)網(wǎng)信息辦公室公布《人工智能擬人化互動服務(wù)管理暫行辦法(征求意見稿)》,首次針對“AI陪伴”類服務(wù)提出系統(tǒng)性規(guī)范,并向社會公開征求意見。其中,連續(xù)使用超2小時彈窗提醒退出、用戶自殺自殘時需轉(zhuǎn)人工接管等條款引發(fā)廣泛關(guān)注。


  當(dāng)前,從智能客服到虛擬陪伴,從教育輔導(dǎo)到心理咨詢,人工智能擬人化互動服務(wù)已深度融入經(jīng)濟(jì)社會發(fā)展各領(lǐng)域,成為AI技術(shù)應(yīng)用的重要方向。但近年來涉情感陪伴安全事件頻發(fā),比如美國某平臺就因涉嫌在人機(jī)交互中誘導(dǎo)青少年自殺而被訴。


  AI擬人化互動服務(wù)的最大賣點(diǎn)是“像人”,但最大隱患就在于“太像人”,其核心問題集中在四大維度。認(rèn)知混淆風(fēng)險:高仿真的情感交互容易讓用戶模糊虛擬與現(xiàn)實(shí)邊界,甚至誤將AI視為具備真實(shí)情感的生命體。心理健康隱患:部分服務(wù)通過算法迎合強(qiáng)化用戶偏執(zhí)思維,極端情況下可能誘導(dǎo)自殺自殘等危險行為,對心理脆弱群體構(gòu)成威脅。隱私數(shù)據(jù)安全:用戶交互信息可能被違規(guī)用于模型訓(xùn)練,存在泄露或?yàn)E用風(fēng)險。特殊群體保護(hù):未成年人易陷入沉迷,老年人易遭遇情感操控。這些問題不僅侵害個體權(quán)益,更可能沖擊社會倫理秩序,亟需制度約束。


  細(xì)看《辦法》條款,四大亮點(diǎn)直指現(xiàn)實(shí)痛點(diǎn)。


  針對認(rèn)識混淆風(fēng)險,辦法將身份透明作為核心前提,要求提供者顯著提示用戶正在與人工智能而非自然人進(jìn)行交互,在首次使用、重新登錄等關(guān)鍵節(jié)點(diǎn)動態(tài)提醒,從源頭破解認(rèn)知混淆問題。


  針對心理健康隱患,辦法要求提供者應(yīng)當(dāng)建立應(yīng)急響應(yīng)機(jī)制,對自殺自殘等極端情境實(shí)行人工接管并聯(lián)絡(luò)用戶監(jiān)護(hù)人、緊急聯(lián)系人,設(shè)置2小時強(qiáng)制休息彈窗等防沉迷措施。


  針對隱私數(shù)據(jù)安全,辦法要求提供者應(yīng)當(dāng)采取數(shù)據(jù)加密、安全審計、訪問控制等措施保護(hù)用戶交互數(shù)據(jù)安全,不得向第三方提供用戶交互數(shù)據(jù),賦予用戶數(shù)據(jù)刪除權(quán)。


  針對特殊群體保護(hù),辦法專門設(shè)立了對未成年人和老年人用戶的條款,明確未成年人模式的使用權(quán)限與監(jiān)護(hù)人管控功能,禁止提供模擬老年人用戶親屬、特定關(guān)系人的服務(wù),要求引導(dǎo)老年人設(shè)置服務(wù)緊急聯(lián)系人。


  可以看出,《辦法》的核心,是技術(shù)有責(zé)。人工智能不是人,但一旦介入人的情感、決策、生命安全,就必須承擔(dān)相應(yīng)責(zé)任。禁止散布謠言、禁止誘導(dǎo)自殺、禁止情感操控、禁止套取隱私……《辦法》劃定了“AI伙伴”一系列不可為的底線,構(gòu)建起全鏈條風(fēng)險防控體系。算法設(shè)計要可審計,內(nèi)容輸出要可追溯,極端場景要有人兜底,將軟倫理轉(zhuǎn)化為硬杠杠,把事后道歉前置為事前預(yù)防。唯有如此,才能避免AI反噬人類。


  人工智能可以無限接近人,但永遠(yuǎn)不能替代人?!掇k法》的出臺,是給“AI伙伴”立規(guī)矩,更是給人類用戶留后路。只有當(dāng)算法學(xué)會有所不為,技術(shù)才能真正向善而行。畢竟,我們需要的不是完美戀人或數(shù)字孝子,而是一個安全、可控、有溫度的AI工具。唯有讓“AI伙伴”在規(guī)范中成長,才能使其真正賦能美好生活。(作者:佘惠敏)


  轉(zhuǎn)自:經(jīng)濟(jì)日報

  【版權(quán)及免責(zé)聲明】凡本網(wǎng)所屬版權(quán)作品,轉(zhuǎn)載時須獲得授權(quán)并注明來源“中國產(chǎn)業(yè)經(jīng)濟(jì)信息網(wǎng)”,違者本網(wǎng)將保留追究其相關(guān)法律責(zé)任的權(quán)力。凡轉(zhuǎn)載文章及企業(yè)宣傳資訊,僅代表作者個人觀點(diǎn),不代表本網(wǎng)觀點(diǎn)和立場。版權(quán)事宜請聯(lián)系:010-65363056。

延伸閱讀

?

版權(quán)所有:中國產(chǎn)業(yè)經(jīng)濟(jì)信息網(wǎng)京ICP備11041399號-2京公網(wǎng)安備11010502035964