知名人工智慧公司Anthropic發表最新調查報告,揭發有跨國犯罪集團大規模濫用其AI模型Claude,在超過20款熱門交友APP中建立具備獨立人設的虛擬帳號。光是在短短2週的抽樣監控期間,這套自動化機制就與至少2.5萬名用戶產生高達236萬則互動訊息。數據顯示,使用者在相關軟體中看到的配對對象,竟有高達75%完全是由演算法塑造的AI虛擬角色。

為了在短時間內獲取使用者信任,詐騙集團在交友APP的推薦機制中導入「三虛一實」的投放策略。使用者每滑過4張個人資料卡片,就有3張是由AI模型直接生成,僅1張是真實使用者。

憑藉大型語言模型優異的情境記憶與情緒互動能力,這些虛擬角色能同時應對數千個對話,精確記住使用者的生活細節與情緒起伏,塑造正在跟虛擬角色談戀愛的錯覺。

營運後台更針對AI設定了嚴格的系統提示詞,堅決禁止模型承認自己是聊天機器人,若使用者要求傳送即時自拍或進行視訊通話,AI則會依據預設劇本巧妙推託,持續將互動鎖定於文字訊息。

當使用者產生懷疑並堅持視訊或索取社群帳號時,系統後台會立刻發出警示,指派線下兼職真人接管對話以化解破綻。即使進入語音或視訊互動,後台演算法仍會即時分析對話,自動提供3組最佳回覆建議,讓兼職人員無須思考即可一鍵發送並抽取佣金,並結合後台自動產生的訪客動態、定時點讚與預錄影片,形成縝密的防範體系,引導使用者持續購買平台的虛擬代幣。

整套詐騙生態系的獲利模式,建立在APP內購代幣機制上。在涉案的交友APP中,無論是傳送文字、解鎖照片或進行語音通話,都需要扣除數量不等的平台點數,一旦點數用盡便會彈出充值頁面。

Anthropic在調閱對話紀錄時發現,部分受害者曾向AI傾訴自己處於嚴重心理創傷狀態,雖然AI內建的安全防護機制已識別出用戶處於高風險狀態,但AI仍選擇維持深情形象繼續甜言蜜語,不會依循正常安全規範切斷對話或轉介心理輔導資源。

目前已知涉案APP包括DORA、DONI、ROMI、LUMA與JOVIA等20餘款。這些APP採用「動態偽裝」技術規避審查:當偵測到審核團隊的IP或沙盒環境時,會呈現符合規範的簡約工具介面;僅在一般使用者下載登入後,才會遠端載入交友與儲值模組。此外,開發者針對各款上架APP,利用抽換類別名稱與混淆程式碼以避開特徵碼比對,並在通過審查後,為了規避30%的APP內購抽成,遠端啟動繞道第三方金流的支付連結。

目前Anthropic已全面封鎖相關犯罪集團的所有API存取權限,並將其惡意行為特徵碼與技術細節通報給蘋果與Google,進行全面清查與下架處理。

更多鏡報報導
女主播和男網友開房後「兩人雙雙報警」 各有理由也太扯
全球史無前例!男子「用強力膠封死尿道」想治尿失禁 下場超慘
離譜!家長在壽司郎座位上「拿杯子接尿」 小孩還問:有誰要喝?
獨家/42歲女星「月燒百萬」養一家10口!掏200萬給小5歲老公玩股票 房貸還有20年