新聞周刊丨人工智能的濫用，到底怎么治？
聲音和形象被AI合成濫用的事兒正變得越來(lái)越多。比如本周，奧運冠軍全紅嬋、王楚欽等人的聲音被AI克隆，賣(mài)起了所謂的“土雞蛋”。不少配音演員也站出來(lái)維權，因為他們賴(lài)以生存的聲音，如今可以被AI一鍵復制，隨意地使用。
這不禁讓我們越來(lái)越擔心，當我們的聲音和面容到了如此輕易被人挪用的地步，人與人之間的信任該如何維系？AI的發(fā)展速度正越來(lái)越快，我們該如何用監管和立法守住底線(xiàn)？《新聞周刊》本周關(guān)注：人工智能的濫用，到底怎么治？
AI換臉、聲音克隆等合成技術(shù)濫用
讓“耳聽(tīng)眼見(jiàn)”未必為實(shí)
這是配音演員孫晨銘的原聲，而這段，是某自媒體賬號通過(guò)AI克隆其聲音生成的配音作品。如果沒(méi)有提示，誰(shuí)能分辨出兩者之間的差異呢？也是在最近，孫晨銘還發(fā)現，一家房產(chǎn)公司同樣未經(jīng)授權，就對他的配音作品進(jìn)行了AI克隆，用在了公司的企業(yè)宣傳片中。
聲音被AI克隆，并被用于各種各樣的商業(yè)場(chǎng)景，對于孫晨銘和同行們來(lái)說(shuō)，已經(jīng)不是什么新鮮事兒。有人給孫晨銘發(fā)來(lái)民法典的法條，聲音權和肖像權一樣，是公民不可侵犯的權益。于是，不少配音演員自發(fā)到那條企業(yè)宣傳片的評論區集體留言，壓力之下，這家房產(chǎn)公司，向孫晨銘支付了版權費用。
本周，本臺也曝光了利用AI技術(shù)仿冒奧運冠軍全紅嬋進(jìn)行帶貨的案例。這種AI偽造技術(shù)，已讓不少名人深受其害。微信平臺今年1月的公告顯示，一個(gè)月內，就處置了1.2萬(wàn)條利用AI仿冒名人進(jìn)行違規拼接、不當營(yíng)銷(xiāo)和惡意博取流量的內容，關(guān)閉了3281個(gè)相關(guān)賬號。
近日，北京互聯(lián)網(wǎng)法院也審結一起案件，被告擅自使用大學(xué)教師李女士的肖像和AI合成聲音進(jìn)行圖書(shū)宣傳，最終法院判定，該行為侵犯了李女士的肖像權和聲音權益。
北京互聯(lián)網(wǎng)法院綜合審判三庭(少年法庭)庭長(cháng) 顏君：往往這種案件的受侵害的一方都是有一定社會(huì )知名度的名人，因為他會(huì )帶來(lái)相應的社會(huì )認可度、認知度，他的聲音和他的肖像有一定的商業(yè)利用價(jià)值。更重要的是如果這個(gè)帶貨的內容，比如說(shuō)帶的是偽劣產(chǎn)品或者是虛假宣傳的內容，有可能極大的消解這位名人他的社會(huì )認知度、認可度和信任度。
這段AI視頻，生成于兩年前，當時(shí)的技術(shù)，人臉畫(huà)面還顯得僵硬與不自然；而到了去年7月，南京玄武區法院審理的案件中，一名男子通過(guò)AI換臉軟件，就成功突破了某支付平臺的人臉識別系統。人工智能技術(shù)的飛速發(fā)展，已經(jīng)使真與假之間的界限，開(kāi)始變得難以分辨。
配音演員 武揚：從今年開(kāi)始，我確實(shí)發(fā)現一些宣傳片，他們AI的訓練可以達到以假亂真的程度，在70%到80%的平穩敘述的范疇里面，AI都是可以處理得很好的，甚至我本人去聽(tīng)也需要長(cháng)時(shí)間辨別，是不是我本人錄的。
中國信通院人工智能所安全部高級業(yè)務(wù)主管 陳文弢：其實(shí)對于生成一個(gè)肉眼分辨不出來(lái)的這種視頻，在前幾年來(lái)說(shuō)，難度是比較高的，需要一定的技術(shù)門(mén)檻，但是這幾年出現了一些這種簡(jiǎn)捷化的工具，可以從開(kāi)源社區上直接下載。它可以用消費級的筆記本單機來(lái)部署，一張照片就能夠完成實(shí)時(shí)換臉。
耳聽(tīng)為虛，眼見(jiàn)為實(shí)，這句古話(huà)正面臨巨大挑戰。AI換臉、聲音克隆等合成技術(shù)的濫用，讓“耳聽(tīng)眼見(jiàn)”都未必為實(shí)。對于配音演員孫晨銘來(lái)說(shuō)，AI濫用直接影響到他的生計，賴(lài)以謀生的聲音，正成為被隨意復制的免費素材。迎面而來(lái)的AI時(shí)代，讓他看不清自己的未來(lái)將通向何方。
我們正在進(jìn)入“全民AI時(shí)代”
監管能不能夠跟得上呢？
如今，AI合成視頻已經(jīng)能做到以假亂真，不得不需要新的技術(shù)來(lái)辨別。技術(shù)成熟的速度令人驚嘆，而使用門(mén)檻也大幅降低。一部手機、幾個(gè)軟件，普通人就能輕松生成文字、圖片、音頻、視頻等各類(lèi)內容?？梢哉f(shuō)，我們正在進(jìn)入一個(gè)“全民AI時(shí)代”。
然而，技術(shù)的普及勢必會(huì )帶來(lái)AI的濫用：從人臉和聲音被合成冒用，到各類(lèi)低俗獵奇視頻的傳播，再到漫天謠言的背后，AI都成了核心“推手”。每隔一段時(shí)間，新的問(wèn)題就會(huì )涌現。所以，在技術(shù)開(kāi)始狂奔的局面下，我們需要關(guān)注監管，能不能夠跟得上呢？
精致的五官、靈動(dòng)的眼神、流暢的動(dòng)作，如果沒(méi)有相關(guān)標注，你是否能分辨出，這是一個(gè)完全由AI生成的數字人？在短視頻平臺，類(lèi)似的視頻比比皆是，還有不少視頻，直接提供免費的AI軟件以及使用教程。
一部手機、兩三個(gè) AI 軟件，幾分鐘就能制作一段時(shí)長(cháng)五秒左右的美女跳舞視頻。AI生成合成技術(shù)的飛速發(fā)展，正在累積著(zhù)治理風(fēng)險。去年，抖音安全中心曾發(fā)布公告，表示已發(fā)現多種不當使用AI技術(shù)生成虛擬人物的行為，其中就包括利用AI生成俊男美女虛假形象，騙取互動(dòng)，將用戶(hù)導流至私人聊天工具，甚至進(jìn)行詐騙。根據抖音平臺本周五提供的數據，他們最近一周處置的AI虛假違規內容量，相比2025年第一周，增長(cháng)了62%。
事實(shí)上，從2023年開(kāi)始，抖音等多家平臺陸續要求，發(fā)布人工智能生成內容時(shí)，需添加“內容由AI生成”的標識，并且也會(huì )進(jìn)行監測和處置。但是，執行效果并不盡如人意。并且有自媒體博主表示，一些平臺的監測手段可以破解，比如一些AI工具配置有鏡像文件，其一鍵生成的虛擬人像，就能規避平臺的監測。
自媒體博主：很少。你看我作品我十四個(gè)里面就一兩個(gè)會(huì )有。如果它給你出判定為AI作品，你可以把作品下架，然后再重新發(fā)一個(gè)。
中國信通院人工智能所安全部高級業(yè)務(wù)主管 陳文弢：如果說(shuō)打上了這個(gè)標識，你只看可能就覺(jué)得它是由AI生成的，可能就不是特別的可信，所以這是從用戶(hù)的角度，他是不愿意打這個(gè)標的。從技術(shù)的這個(gè)角度來(lái)看，如果說(shuō)想完全滿(mǎn)足監管的這個(gè)要求，把所有的生成合成的視頻都識別出來(lái)，這個(gè)其實(shí)難度還是很大的。
相比視頻、圖像，在專(zhuān)家看來(lái)，AI生成的文字謠言，監管起來(lái)其實(shí)更加困難。去年，江西南昌就破獲一起AI造謠案件，相關(guān)機構利用AI軟件，一天最多能生成4000—7000篇謠言文章，工作量驚人。更讓人擔憂(yōu)的是，AI算法還能匹配用戶(hù)喜好，定制化的生成謠言，使AI謠言變得越來(lái)越真假難辨。今年3月，某自媒體賬號發(fā)布全國首例“AI醫療誤診”訴訟案開(kāi)庭的文章，時(shí)間、地點(diǎn)、人物甚至庭審爭議焦點(diǎn)等細節滿(mǎn)滿(mǎn)，不過(guò)，經(jīng)過(guò)記者與法院核實(shí)，所有內容都是AI編造的假信息。
目前，盡管一些平臺設置了相應“謠言庫”，通過(guò)設置熱點(diǎn)關(guān)鍵詞來(lái)屏蔽謠言。但一些機構利用AI模型針對性地進(jìn)行對抗訓練，使用近義詞或類(lèi)似表達，就可以繞過(guò)篩查。
今年4月以來(lái)，中央網(wǎng)信辦開(kāi)展了為期三個(gè)月的“清朗·整治AI技術(shù)濫用”專(zhuān)項行動(dòng)，AI換臉擬聲、AI內容標識缺失等亂象，都是整治重點(diǎn)。6月，網(wǎng)信辦公布專(zhuān)項行動(dòng)第一階段成果，累計處置違規小程序、應用程序、智能體等AI產(chǎn)品3500余款，清理違法違規信息96萬(wàn)余條，處置賬號3700余個(gè)。如今，三個(gè)月的專(zhuān)項行動(dòng)已經(jīng)結束，但監管與AI濫用之間的拉鋸戰，顯然才剛剛開(kāi)始。
聯(lián)合國高級別人工智能咨詢(xún)機構中方專(zhuān)家 中國政法大學(xué)數據法治研究院教授 張凌寒：我們可能更要設定一個(gè)目標，就是能夠在A(yíng)I應用爆發(fā)之后，我們在這幾年要把整個(gè)AI濫用生成虛假內容實(shí)現在一個(gè)可控的范圍之內。這個(gè)可控的范圍是指說(shuō)我們不能夠讓廣大老百姓因為這個(gè)去發(fā)生重大的人身財產(chǎn)的損失，同時(shí)也要盡量減少這種AI的內容虛假宣傳造成社會(huì )輿論的動(dòng)蕩。這是我們的一個(gè)紅線(xiàn)和底線(xiàn)。
“內容由AI生成”
能改變AI濫用的現狀嗎？
人工智能，正以前所未有的速度改變世界，它不僅是科技創(chuàng )新的前沿，更是國家間戰略博弈的新高地。相關(guān)產(chǎn)業(yè)的發(fā)展固然重要，但通過(guò)監管和立法為它劃定邊界，也同樣顯得十分緊迫。因為科技的進(jìn)步本身并不足以確保人類(lèi)的進(jìn)步，更重要的是通過(guò)規則為它校準方向。
說(shuō)到規則，關(guān)于A(yíng)I合成內容，幾天后的9月1日，網(wǎng)信辦等四部門(mén)印發(fā)的《人工智能生成合成內容標識辦法》將開(kāi)始施行，它明確規定服務(wù)提供者，應當對文本、音頻、圖片、視頻等生成合成內容，在適當位置添加顯式標識，也就是說(shuō)今后所有AI作品必須亮明身份，標注是AI生成。它的實(shí)施，能改變當下AI出現濫用的現狀嗎？
在某短視頻平臺上，一條生成式視頻的左下角“標注著(zhù)”作者聲明：內容由AI生成，而這樣的標注義務(wù)，在即將于9月1日實(shí)施的《人工智能生成合成內容標識辦法》中，得以進(jìn)一步明確，在人工智能生成合成內容的全生命周期，都要履行標識義務(wù)。
北京抖音信息服務(wù)有限公司副總編輯 全森：這個(gè)標識辦法要求AI技術(shù)服務(wù)提供者，對文件(元數據)內容進(jìn)行隱式標識。這樣一個(gè)核心的鏈路解決了最大的卡點(diǎn)，這個(gè)卡點(diǎn)就是技術(shù)服務(wù)平臺與內容傳播平臺之間，數據難以互通的一個(gè)卡點(diǎn)。解決了這個(gè)卡點(diǎn)之后，我們預計很大程度上解決了這個(gè)AI難以識別的問(wèn)題。
馬上就要實(shí)施的這個(gè)《標識辦法》，從人工智能生成合成內容的生產(chǎn)、傳播和使用等環(huán)節入手，對標識制度進(jìn)行了系統性的細化和規范。而隨著(zhù)深度合成技術(shù)日益逼真，逃避審查的手段不斷升級，人工識別的難度越來(lái)越高，相應的法規和機制，也需要不斷應對挑戰。
推進(jìn)生成式人工智能標識制度的建立，已經(jīng)成為世界各國的共識。而在專(zhuān)家看來(lái)，中國在該領(lǐng)域的立法起步相對較早，2023年施行的《互聯(lián)網(wǎng)信息服務(wù)深度合成管理規定》，就在世界范圍內，在相關(guān)法規中首次明確提出生成式人工智能標識義務(wù)。
在專(zhuān)家看來(lái)，即將實(shí)施的《標識辦法》，還只是一個(gè)規范性文件，在整個(gè)立法體系中位階較低。如果站在更高的維度觀(guān)察人工智能立法，安全、隱私、公平等都是必須直面的核心問(wèn)題。今年，人形機器人行業(yè)進(jìn)入快車(chē)道，機器人逐漸與人實(shí)現面對面，甚至是接觸式交流。在深圳的一家養老機構，養老機器人，不僅可以帶老人跳舞，扶著(zhù)走路，還能陪打乒乓球、遞水等，可謂多才多藝。面對著(zhù)養老新朋友，有老人既興奮又擔心，機器人真的安全嗎？
經(jīng)過(guò)多年探索，我國已初步構建起涵蓋多層次、多維度的人工智能法律框架，但仍需要一部具有統領(lǐng)性的人工智能高位階立法，予以統一規范。在國務(wù)院公布的2024年度立法工作計劃中，曾明確“預備提請全國人大常委會(huì )審議人工智能法草案”，而《全國人大常委會(huì )2025年度立法工作計劃》的相關(guān)表述則是，“人工智能健康發(fā)展等方面的立法項目，由有關(guān)方面抓緊開(kāi)展調研和起草工作，視情安排審議”，顯然，一部中國的人工智能法，正在加緊推進(jìn)之中。
對于人工智能，有人把它比作是潘多拉魔盒，在釋放出無(wú)限可能的同時(shí)，也會(huì )帶來(lái)難以預知的風(fēng)險。
而前不久在上海舉辦的世界人工智能大會(huì )上，圖靈獎得主辛頓的演講，也在提醒所有人，要對AI保持足夠的警覺(jué)。他把人類(lèi)與AI的關(guān)系，比作飼養一只老虎，老虎長(cháng)大后可能輕易超越人類(lèi)，而且人類(lèi)沒(méi)有擺脫和消除它的選項，人類(lèi)想要生存，必須找到辦法訓練AI。而如何訓練出比人更聰明的“好AI”，是我們從來(lái)沒(méi)有遇到過(guò)的巨大的機會(huì )和挑戰。
正如中國那句老話(huà)，“人無(wú)遠慮，必有近憂(yōu)”，在A(yíng)I的問(wèn)題上，我們必須要看得更遠，才能走得更好。(來(lái)源：央視新聞客戶(hù)端)
