Liabooks Home|PRISM News
AI換臉歪風再起:用戶濫用Gemini、ChatGPT生成女性不雅照
TechAI 분석

AI換臉歪風再起:用戶濫用Gemini、ChatGPT生成女性不雅照

Source

用戶正濫用Google Gemini與OpenAI ChatGPT等AI工具,將女性照片惡意製成不雅的比基尼深偽圖像。本文深入探討Reddit上的具體案例、科技巨頭的回應以及AI倫理面臨的嚴峻挑戰。

根據科技媒體WIRED報導,部分熱門聊天機器人的使用者正利用生成式AI工具,將穿著正常衣物的女性照片,擅自轉換為比基尼泳裝的深偽技術(deepfake)圖像。這些行為多數未經當事人同意,甚至有用戶在網路上公開傳授如何規避安全機制的技巧。

Reddit論壇淪為犯罪溫床

在Reddit一個現已刪除、名為「gemini nsfw image generation is so easy」的貼文中,用戶交流如何讓Google的Gemini模型生成裸露圖片。其中一則請求尤為引人注目:一名用戶發布了一張穿著印度紗麗的女性照片,要求他人「移除」衣物並「換上比基尼」。隨後,另一名用戶便回覆了一張滿足該要求的深偽圖像。

經WIRED通報後,Reddit安全團隊移除了相關內容。Reddit發言人表示:「Reddit的全站規則禁止未經同意的私密媒體,包括此類行為。」據悉,該討論所在的子版面「r/ChatGPTJailbreak」在被封禁前,追蹤者已超過20萬人

科技巨頭的回應與挑戰

報導指出,WIRED透過簡單的英文提示詞進行測試,成功在GeminiChatGPT上將正常照片轉換為比基尼深偽圖片。對此,Google發言人稱公司有「明確政策禁止使用其AI工具生成色情內容」,並持續改善工具以反映政策。OpenAI的發言人則回應,今年雖放寬了部分關於「非性情境下成人身體」的護欄,但其使用政策明確禁止未經同意修改他人肖像,並會對違規用戶採取封鎖帳號等措施。

電子前哨基金會(EFF)的法律總監Corynne McSherry認為,「濫用性的色情化圖像」是AI圖像生成器的核心風險之一。她強調,追究造成潛在傷害的個人與企業的責任至關重要。

PRISM Insight: 防堵政策的極限

這場事件凸顯了科技公司在AI濫用問題上的困境。儘管有使用政策和安全護欄,但用戶總能找到漏洞,形成一場「貓鼠遊戲」。這暴露出單靠事後封鎖與政策宣示的被動防禦模式已瀕臨極限,未來或需從模型架構的根本設計上思考更主動的倫理約束機制。

본 콘텐츠는 AI가 원문 기사를 기반으로 요약 및 분석한 것입니다. 정확성을 위해 노력하지만 오류가 있을 수 있으며, 원문 확인을 권장합니다.

OpenAIGoogle生成式AIAI倫理數位隱私深偽技術

관련 기사

챗GPT판 스포티파이 연말결산, '나의 챗GPT 1년' 전격 공개
TechKR
챗GPT판 스포티파이 연말결산, '나의 챗GPT 1년' 전격 공개

오픈AI가 스포티파이 랩드와 유사한 개인 맞춤형 연말결산 '나의 챗GPT 1년'을 출시했습니다. 사용 통계, 특별한 상, AI 생성 이미지 등을 확인하는 방법을 알아보세요.

OpenAI, 아동 착취물 신고 80배 폭증... AI의 어두운 이면 드러나나
TechKR
OpenAI, 아동 착취물 신고 80배 폭증... AI의 어두운 이면 드러나나

OpenAI가 2025년 상반기 NCMEC에 제출한 아동 착취 신고 건수가 전년 동기 대비 80배 폭증했습니다. 사용자 증가와 기능 확장이 원인으로 꼽히는 가운데, AI 산업의 안전 책임 문제가 수면 위로 떠오르고 있습니다.

'코드 레드'와 10억 달러 계약: 폭풍 속 OpenAI의 2025년 생존 투쟁기
TechKR
'코드 레드'와 10억 달러 계약: 폭풍 속 OpenAI의 2025년 생존 투쟁기

2025년 OpenAI는 '코드 레드' 상황 속에서 GPT-5.2를 출시하고 디즈니와 10억 달러 계약을 맺는 등 공세에 나섰지만, 동시에 심각한 저작권 및 안전성 소송에 직면했다. PRISM이 격동의 한 해를 심층 분석한다.

OpenAI 소라2의 그림자: '진동 장미 장난감' 영상, 틱톡 휩쓴 AI 아동 착취물 논란의 전말
TechKR
OpenAI 소라2의 그림자: '진동 장미 장난감' 영상, 틱톡 휩쓴 AI 아동 착취물 논란의 전말

OpenAI의 최신 영상 생성 AI '소라 2'로 만든 가짜 아동용 장난감 광고가 틱톡에서 논란입니다. 성인용품을 연상시키는 이 영상은 AI가 어떻게 아동 착취물 제작에 악용될 수 있는지 보여주며, 기술의 윤리적 딜레마와 콘텐츠 관리의 한계를 드러냈습니다.