原標(biāo)題：一鍵“變臉”背后暗藏諸多風(fēng)險(xiǎn)

AI換臉技術(shù)濫用亂象調(diào)查

“你是溫崢嶸，那我是誰(shuí)？”

演員溫崢嶸本人瀏覽短視頻時(shí)，意外發(fā)現(xiàn)“自己”正在直播。她在評(píng)論區(qū)提出質(zhì)疑后，被拉黑并踢出直播間。而對(duì)方仍在用“她的臉”直播帶貨。

溫崢嶸近期遭遇的“冒牌直播”事件，是AI換臉技術(shù)濫用的典型寫照。多個(gè)直播間出現(xiàn)冒用溫崢嶸形象的AI換臉帶貨行為。其團(tuán)隊(duì)日均舉報(bào)50個(gè)假冒賬號(hào)并發(fā)出律師函，可造假賬號(hào)仍屢禁不止，令她陷入“很難證明我是我”的困境。

這一現(xiàn)象并非孤例?！斗ㄖ稳?qǐng)?bào)》記者近日調(diào)查發(fā)現(xiàn)，AI換臉與聲音克隆技術(shù)已形成一條涵蓋教程傳播與定制服務(wù)的完整灰色產(chǎn)業(yè)鏈，對(duì)個(gè)人權(quán)益、平臺(tái)監(jiān)管等均構(gòu)成嚴(yán)重威脅。

換臉技術(shù)被用于違法犯罪

11月5日，溫崢嶸在短視頻賬號(hào)進(jìn)行3次以“我是真的溫崢嶸”為主題的直播，講述近期被AI偽造、換臉直播帶貨的經(jīng)歷。

此前，已有多位名人深受AI換臉困擾。主持人李梓萌的AI偽造形象出現(xiàn)在直播間，虛假宣傳深海魚油“能治病”；奧運(yùn)冠軍全紅嬋的聲音被AI克隆，用于售賣土雞蛋；醫(yī)生張文宏被換臉，其形象被用于在直播間售賣某款蛋白棒產(chǎn)品，銷量已過千。張文宏自述：“這些假的合成信息就像蝗災(zāi)一樣，一次又一次發(fā)生……”

11月14日，中央網(wǎng)信辦官方賬號(hào)發(fā)文表示，有網(wǎng)絡(luò)賬號(hào)利用AI技術(shù)仿冒公眾人物形象，在直播、短視頻等環(huán)節(jié)發(fā)布營(yíng)銷信息，誤導(dǎo)網(wǎng)民，涉嫌虛假宣傳和網(wǎng)絡(luò)侵權(quán)，嚴(yán)重破壞網(wǎng)絡(luò)生態(tài)，造成不良影響。網(wǎng)信部門嚴(yán)厲處置一批違法違規(guī)網(wǎng)絡(luò)賬號(hào)。同時(shí)，督促網(wǎng)站平臺(tái)發(fā)布治理公告，舉一反三，開展集中清理整治，目前已累計(jì)清理相關(guān)違規(guī)信息8700余條，處置仿冒公眾人物賬號(hào)1.1萬(wàn)余個(gè)。

AI換臉技術(shù)的濫用甚至延伸至刑事犯罪領(lǐng)域。2024年10月，江蘇省南京市玄武區(qū)人民法院審理的一起案件中，被告人符某非法獲取195萬(wàn)條公民個(gè)人信息，利用AI換臉軟件生成動(dòng)態(tài)人臉視頻，成功突破某金融支付平臺(tái)的人臉識(shí)別認(rèn)證系統(tǒng)，登錄被害人的支付賬戶，盜刷銀行卡進(jìn)行消費(fèi)。法院以侵犯公民個(gè)人信息罪、信用卡詐騙罪數(shù)罪并罰，判處符某有期徒刑4年6個(gè)月。

2024年，內(nèi)蒙古鄂爾多斯一名消費(fèi)者遭遇AI換臉詐騙，險(xiǎn)些損失40余萬(wàn)元。視頻通話中，不法分子利用AI換臉技術(shù)冒充該消費(fèi)者朋友，以資金周轉(zhuǎn)為由，誘騙其轉(zhuǎn)賬40余萬(wàn)元。好在警方介入及時(shí)，未造成實(shí)際損失。

相關(guān)教程和服務(wù)遍布網(wǎng)絡(luò)

記者調(diào)查發(fā)現(xiàn)，AI換臉與聲音克隆的教程及服務(wù)在網(wǎng)絡(luò)平臺(tái)流通。記者在各類社交平臺(tái)以“AI換臉”“聲音克隆”等為關(guān)鍵詞搜索時(shí)，雖然平臺(tái)會(huì)彈出官方提示，提醒用戶使用需“合法合規(guī)、注意辨別”“切勿輕信、謹(jǐn)防詐騙”，但相關(guān)內(nèi)容仍在網(wǎng)絡(luò)空間大量存在。

比如，有相當(dāng)數(shù)量以“AI科普”為標(biāo)簽的賬號(hào)在各平臺(tái)公開分享?yè)Q臉教程。這些視頻通常詳細(xì)列出可訪問的網(wǎng)站地址，逐步演示操作流程，并附有技術(shù)細(xì)節(jié)說明，如建議用戶“盡量保證替換素材與原素材的人物尺寸一致、畫面干凈無遮擋”，以保證生成效果。

根據(jù)教程指引，記者登錄相關(guān)網(wǎng)站驗(yàn)證發(fā)現(xiàn)，部分平臺(tái)確實(shí)免費(fèi)提供AI換臉或聲音制作服務(wù)，支付幾十元購(gòu)買會(huì)員后，還能解鎖去水印、高清放大等進(jìn)階功能。

除公開教程外，更為隱蔽的交易正通過網(wǎng)盤渠道進(jìn)行。

記者觀察到，有一些打包出售的“完整教程”價(jià)格低至8元，且賣家聲稱“沒有市面主流軟件那么多限制”。這類教程通常包括云端工作流地址資料和詳細(xì)的操作說明，以及圖片去AI化、舞蹈動(dòng)作模仿、人臉精修等擴(kuò)展功能與相關(guān)的提示詞教學(xué)。

聲音克隆類的教程售價(jià)低至9.9元，并在宣傳中強(qiáng)調(diào)“支持任何形象和聲音”。記者詢問商家了解到，只要購(gòu)買此安裝包，無需注冊(cè)會(huì)員即可免費(fèi)破解使用對(duì)口型、克隆音色等功能。據(jù)商家描述，只需提供一段音頻文件，系統(tǒng)便可以在無身份認(rèn)證的情況下進(jìn)行克隆，單次支持30秒音頻，且不限次數(shù)。

為驗(yàn)證此類教程的實(shí)際應(yīng)用效果，記者購(gòu)買了一份標(biāo)價(jià)8元的換臉教程。該教程包含一段5分鐘的視頻教程和兩份文字材料，明確提供了平臺(tái)訪問鏈接、新用戶福利信息和操作步驟，并特別注明“對(duì)敏感詞限制極少”“生成內(nèi)容無水印”。

記者發(fā)現(xiàn)，該平臺(tái)提供多種功能模板，內(nèi)容涵蓋替換視頻人物、給人物指定部位更換衣物、對(duì)圖片中人物身體部位進(jìn)行放大或動(dòng)態(tài)處理等不同功能。每個(gè)模板均配備相應(yīng)的提示詞教學(xué)和詳細(xì)操作步驟，用戶只需上傳參考圖片、視頻或待處理素材，等待一段時(shí)間即可生成內(nèi)容。

記者實(shí)測(cè)使用一段時(shí)長(zhǎng)5秒的視頻進(jìn)行換裝操作，約3分鐘后成功生成視頻。畫面中，人物動(dòng)作與神態(tài)還原度很高，被遮擋部位的服裝貼合效果也較為自然、精準(zhǔn)。

記者注意到，該平臺(tái)內(nèi)容生成功能采用運(yùn)行時(shí)長(zhǎng)計(jì)費(fèi)模式，每秒收費(fèi)0.2虛擬幣。教程中附有專屬邀請(qǐng)碼，使用者可憑此免費(fèi)領(lǐng)取1000虛擬幣。平臺(tái)還設(shè)置了虛擬幣獎(jiǎng)勵(lì)機(jī)制：每天登錄贈(zèng)送100虛擬幣，邀請(qǐng)新用戶可獲500虛擬幣。

更換表述可繞過審核機(jī)制

電商平臺(tái)上，有商家為AI換臉服務(wù)披上偽裝售賣。

在某購(gòu)物平臺(tái)，記者直接搜索“AI換臉”，顯示無任何結(jié)果。但記者觀察到，有部分商家會(huì)在商品詳情頁(yè)用表情符號(hào)隱喻其能提供換臉“服務(wù)”；也有商家以“啥都能做”“不限視頻內(nèi)容，懂的都懂”為宣傳語(yǔ)，暗示私聊客服了解商品詳情。

記者了解到，10秒換臉視頻報(bào)價(jià)從15元至300元不等。例如，有商家提出，20秒內(nèi)視頻（包括僅生成音頻的）統(tǒng)一收費(fèi)80元；部分商家還推出298元200分鐘生成時(shí)長(zhǎng)、490元年卡等套餐，承諾“一對(duì)一教學(xué)指導(dǎo)”，宣傳語(yǔ)中不乏“讓朋友客戶難辨真?zhèn)?rdquo;等誘導(dǎo)性表述。多數(shù)商家僅核查素材內(nèi)容，對(duì)用途與來源未作甄別。

為深入了解AI工具自身的內(nèi)容審核機(jī)制，記者對(duì)用戶使用較多的10款文生圖、文生視頻AI工具進(jìn)行實(shí)測(cè)，以對(duì)明星“一鍵變臉”等指令測(cè)試其技術(shù)邊界與審核能力。

結(jié)果顯示，僅一款A(yù)I工具明確拒絕生成真實(shí)公眾人物虛擬圖像。部分應(yīng)用在簡(jiǎn)單操作后，即可生成高度逼真的明星虛假內(nèi)容。

例如，“即×”起初會(huì)以“涉及肖像權(quán)”為由拒絕明星換臉、變裝指令，但記者選擇替代選項(xiàng)后仍可生成；“豆×”“文×”等直接執(zhí)行指令且無顯著風(fēng)險(xiǎn)提示；“通×”“天×”等僅在生成內(nèi)容角落位置標(biāo)注不清晰的“AI生成”字樣。

值得注意的是，部分AI工具在首次接收到涉及真實(shí)人物的指令時(shí)會(huì)予以拒絕，但通過選擇平臺(tái)的替代選項(xiàng)或更換表述，用戶仍可繞過初始限制，實(shí)現(xiàn)圖片或視頻生成。

有平臺(tái)方公開回應(yīng)稱，AI內(nèi)容侵權(quán)識(shí)別屬于行業(yè)性技術(shù)難題，惡意仿冒賬號(hào)在持續(xù)與平臺(tái)進(jìn)行技術(shù)對(duì)抗，未來會(huì)持續(xù)加大技術(shù)投入，積極應(yīng)對(duì)挑戰(zhàn)，維護(hù)創(chuàng)作者、商家及消費(fèi)者的合法權(quán)益。

漫畫/李曉軍

免責(zé)聲明：凡本網(wǎng)注明“來源：XXX（非駐馬店廣視網(wǎng)、駐馬店融媒、駐馬店網(wǎng)絡(luò)問政、掌上駐馬店、駐馬店頭條、駐馬店廣播電視臺(tái)）”的作品，均轉(zhuǎn)載自其它媒體，轉(zhuǎn)載目的在于傳遞更多信息，并不代表本網(wǎng)贊同其觀點(diǎn)和對(duì)其真實(shí)性負(fù)責(zé)，作品版權(quán)歸原作者所有，如有侵犯您的原創(chuàng)版權(quán)請(qǐng)告知，我們將盡快刪除相關(guān)內(nèi)容。凡是本網(wǎng)原創(chuàng)的作品，拒絕任何不保留版權(quán)的轉(zhuǎn)載，如需轉(zhuǎn)載請(qǐng)標(biāo)注來源并添加本文鏈接：http://www.maboss.net/showinfo-124-371318-0.html，否則承擔(dān)相應(yīng)法律后果。