兩元就能P不雅照 警惕AI黑色產業(yè)鏈批量“造黃謠”
兩元就能P不雅照,打包售賣持續(xù)更新
警惕AI黑色產業(yè)鏈批量“造黃謠”
6月27日,中央網信辦下發(fā)《關于開展“清朗·2023年暑期未成年人網絡環(huán)境整治”專項行動的通知》,開展為期兩個月的“清朗·2023年暑期未成年人網絡環(huán)境整治”專項行動(以下簡稱“專項行動”)。其中特別指出要關注新技術新應用風險問題,如對“AI換臉”等技術生成涉未成年人低俗色情圖片視頻等,要予以重點整治。
——————————
如今,“AI脫衣”技術已生成一條黑色產業(yè)鏈。上游不法分子通過AI技術生成圖片,并對這些圖片進行整合,打包成圖集,通過成套售賣的方式出售給下游買家,有的人為此建立起“付費會員群”,使一些無辜人士、甚至未成年人陷入“黃謠”漩渦。中青報·中青網記者對此進行了調查采訪。
“AI脫衣”圖被公開叫賣
“圖片中確實是我的臉,但這里的我……怎么沒穿衣服?”
今年5月,還在讀大學的李亦(化名)收到一名網友給她發(fā)來的圖片,看后,她又氣憤又害怕。
李亦是一名Cosplay(角色扮演)博主,常在社交媒體分享自己扮演各種動漫角色的照片。后來,她和網友找到了制作裸照的洛粉(網名)。洛粉承認,他將照片放入一款AI(人工智能)軟件中,不到幾分鐘就能將李亦穿好的衣服“脫下”。在網上,洛粉以5元一張的價格公開叫賣圖片,聲稱60元能打包買到60多名博主的“裸照”,其中甚至還有未成年人的照片。
“我從來沒有拍過這種照片!”氣憤的李亦著手收集對方利用AI進行不法行為的證據(jù),意圖追究其法律責任,于是,她以買家的身份與洛粉加上了好友。
洛粉并非直白地以“AI脫衣”字眼兒招攬生意,而是隱晦地表示自己在“改圖”,“小姐姐,這里接Cosplay的‘改圖’,5元一張?!碑斃钜噙M一步詢問其如何“改圖”時,洛粉含糊不清地表示,自己是采用AI技術生成了各種Cosplay的圖片。
李亦從洛粉組建的一個群聊中發(fā)現(xiàn)了端倪。在這里,洛粉不僅繼續(xù)提供“改圖”的服務,更發(fā)布了大量帶有暗示挑逗意味的圖片,以圖集形式公開叫賣,稱60元可以買到65張,“預計還有總共300張會通過群聊慢慢更新”。
“這是誰?”李亦從中找到了自己的“裸照”,去找洛粉問個明白?!斑@是克羅托(角色名)不穿衣服,博主本人讓這么拍攝的?!甭宸鄞鸬溃⒅M莫如深地提示,“可別亂轉亂發(fā),因為套圖中涉及到的60多名博主本人不同意”。
“他這么說像是我們這些博主自己去拍了大尺度照片!”李亦十分氣憤,亮明身份,與洛粉對質。
“對不起姐姐!”洛粉承認自己“二次創(chuàng)作”了李亦的圖片。李亦表示,這并非正常的“二次創(chuàng)作”范圍,而是侵犯了她的人格權。
洛粉辯稱,這些系列圖并非出自他手,“是請別人做的”,洛粉并沒有意識到這件事情的嚴重性,和李亦商量,“我的卡里余額只有1200元,能不能賠償你650元私了?”
“這不是錢的問題,你已經違法了?!崩钜嗪推渌┲鬟x擇報警。
黑色產業(yè)鏈禍及未成年人
李亦的遭遇并非個例。AI技術被濫用,一條黑色產業(yè)鏈正在形成。
在網絡上,只要輸入關鍵詞,就能輕易找到提供“AI脫衣”相關技術或服務的商家。他們打著“AI繪畫”“AI改圖”的旗號在社交媒體上招攬生意,引導顧客添加其聯(lián)系方式,待到一對一溝通或加入私密群聊后,就拿出具有暗示意味的圖片,誘導網友購買。
“AI脫衣”的受害者眾多,甚至禍及未成年人。一名賣家聲稱自己“資源眾多”,發(fā)來了一整套價目表,詳細地將圖集分為“明星”“網紅”“模特”“漫畫”等多個種類,在他發(fā)來的樣張圖片中,甚至還出現(xiàn)了穿著校服的高中生。他聲稱,如果沒有喜愛的類型,顧客可以發(fā)照片“單圖定制”,兩元一張,“網絡上的圖都可以作為素材”。
另一名賣家也采用會員制方式邀請顧客進群,稱目前“群里已經有兩三百個圖集”,只要花30元進群就可以享受免費持續(xù)更新。當中青報·中青網記者進一步追問其圖集來源時,他支支吾吾地表示自己的資源是從某網站下載來的,“不是我自己做的”。
“其實只要掌握了相關技術,人們都可以利用AI制作這些圖片?!辟Y深算法工程師藍天告訴中青報·中青網記者,“AI脫衣”算法稱作“DeepNude”,因為倫理問題,目前在美國已被下架,但不排除有人通過其他AI算法訓練機器,以達到同樣的效果。
在某通訊軟件上,一個AI機器人收獲了眾多用戶。它不需要使用者掌握復雜的算法知識,只需要按照其提示,就能完成給照片“換臉”“去衣”等操作。這一機器人還有詳細的精細化設置,能像美顏相機一樣調整圖片的各項參數(shù)。
這款機器人需要付費使用,點擊“充值”按鈕后,用戶會被引導到一個點卡充值網站當中進行網上支付。不過,用戶并非付費給商家,而是個人,因此很難追蹤該機器人的運營主體。根據(jù)其價目表,最低兩元就能生成一張脫衣照。
“機器是中立的,只要給它‘喂’了足夠多的人體構造圖,機器就能在之后輸入圖片時,通過識別面部、身體等特征重繪全圖,生成一張‘脫衣照’?!彼{天稱,機器“只管照片的生成”,不會顧及照片中人的意愿,以及是否成年等倫理、法律問題。
“按照技術工具論的視角,技術是中性且無害的,但這樣的認識忽略了技術本應具有的道德相關性問題。”西南政法大學刑事偵查學院副教授、碩士生導師謝玲認為,技術之間是有差別的,有一些新技術如深度偽造技術等被濫用所產生的后果很難預料,其道德倫理及法律問題更為復雜。
從“最有利于未成年人”原則構建網絡安全規(guī)則
北京市京師律師事務所合伙人姚志斗律師接觸過多起因新技術濫用侵害未成年人權益的案例。在一起案件中,一不法分子利用“AI換臉”軟件,將從互聯(lián)網渠道收集到的大批未成年學生的面部信息進行替換,制作生成虛假的換臉淫穢視頻,再將視頻有償銷售?!斑@不僅侵害未成年學生的肖像權及心理健康,同時這一行為涉嫌傳播淫穢物品牟利犯罪。”
“應對新技術新應用風險,需要從‘最有利于未成年人’原則和‘兒童權利’的視角來構建安全規(guī)則。”中國青少年研究中心青少年法律研究專家郭開元認為,針對新技術新應用帶來的風險,要把握好未成年人的特殊保護和新技術應用的動態(tài)平衡。有關部門應盡快設立保護兒童、尊重隱私、設置特殊保護的規(guī)則,尤其要建立按照年齡標準進行分級管理規(guī)則、監(jiān)護人的知情同意規(guī)則等。
謝玲呼吁,對新技術的應用風險進行分類和評估,建立針對新技術規(guī)制的制度屏障,明確技術合理運用的界限。如果沒有針對技術濫用設立屏障,應嚴格規(guī)制這一類高風險新技術的聯(lián)網應用,因為“新技術極有可能導致未來新型不法行為的產生”。
姚志斗稱,對網絡犯罪監(jiān)管存在一定難度。網絡犯罪證據(jù)主要存儲在網絡服務器中,面對復雜、形式多樣的電子數(shù)據(jù),取證存在一定困難。此外,違法行為人的身份確定難度較大,有的犯罪分子身在國外,給案件管轄帶來挑戰(zhàn)。
事實上,針對網絡新技術新應用帶來的風險,有關部門已加大力度重拳整治。
此次中央網信辦專項行動聚焦的七大重點之一,即劍指新技術新應用風險問題,包括利用“AI換臉”“AI繪圖”“AI一鍵脫衣”等技術生成涉未成年人低俗色情圖片視頻;利用所謂“閱后即焚”的密聊軟件誘騙未成年人提供個人信息,誘導實施違法行為;利用生成式人工智能技術制作發(fā)布涉未成年人有害信息。
“這釋放了國家加大力度整治網絡環(huán)境,切實加強對未成年人網絡保護的信號?!敝x玲指出,這一專項行動針對未成年人身心易受影響的特點,意在預防未成年人不良上網用網行為,避免其成為新型網絡違法犯罪活動的“工具人”,也是落實未成年人保護法、預防未成年人犯罪法相關法律保護措施的具體體現(xiàn)。
如今,李亦已走出心理陰影,她說:“不能因為這些事情而停止我對生活的熱愛。”
中青報·中青網見習記者 劉胤衡 記者 先藕潔 來源:中國青年報
版權聲明:凡注明“來源:中國西藏網”或“中國西藏網文”的所有作品,版權歸高原(北京)文化傳播有限公司。任何媒體轉載、摘編、引用,須注明來源中國西藏網和署著作者名,否則將追究相關法律責任。