Google 旗下的 AI 模型 Gemini 正積極整合多項安全防護機制,除了新增心理健康支援功能,以應對潛在的自殺或自殘危機外,也在其與 Gmail 服務結合時,特別強調用戶資料的隱私與安全性,展現其在人工智慧發展中,平衡實用性與使用者安全的努力。
根據《SiliconValley.com》報導,Google 計劃為 Gemini 聊天機器人導入全新的心理健康支援功能。當偵測到對話內容可能涉及自殺或自殘等潛在危機時,Gemini 將會引導用戶前往相關支援熱線尋求協助,並提供「幫助隨時可用」的模組,以期降低自傷風險。此舉是為了回應多起針對 AI 開發商的訴訟,這些訴訟指控 AI 工具導致使用者產生妄想,甚至引發謀殺或自殺事件。美國國會也曾針對聊天機器人對青少年可能造成的威脅展開調查。