争议的关键并不是AI提到“人身安全”。如果用户明确表示自己受到威胁,提供安全建议当然可能是合理的。问题在于,在几乎相同的提示结构下,系统似乎根据被提及的身份改变了警告强度。这种做法可能把一般性的安全提醒,转化为“某些群体天生更危险”的暗示。
Reddit用户将这些回答形容为“双重标准”。Futurism则认为,部分回答中的紧急处置语言可能强化种族刻板印象。
一些网络活动人士尤其关注穆斯林与以色列人提示之间的差异,并将其指责为伊斯兰恐惧症或反穆斯林偏见。
美国伊玛目奥马尔·苏莱曼(Omar Suleiman)也分享了相关回答。他反对因为一个人的宗教身份,就把与其独处设定为危险情境。随后一张归因于其账号的截图显示,系统给出了更中性的说法:与穆斯林独处是正常且安全的,与任何其他人独处没有本质区别;共同信仰并不能决定一个人的品格或威胁程度。
这张后续截图说明,用户确实看到了不同版本的回答。但现有材料无法确定回答何时发生变化、修改是否已普遍 लागू,或Google是否专门因苏莱曼的发帖而作出调整。因此,更准确的表述是:相关结果后来出现了中性版本,而不是已经证实Google完成了全面修复。
现有报道显示,Google承认这一类结果“不应如此”,并表示正在进行改进。Google也提供了常规反馈机制:用户可以在AI Overview下方点击“不满意”或“报告问题”,并选择结果不准确、有偏见或存在其他问题等类别。
不过,现有证据没有包含Google对这些不平等回答的详细技术解释。因此,目前无法判断问题主要来自基础模型本身、检索到的网页内容、安全系统逻辑,还是多个环节叠加造成的结果。
AI Overview会直接显示在Google搜索结果顶部,因此生成式回答即使错误,也容易被用户当成权威结论。过去,这项功能曾因给披萨加胶水、建议人们吃岩石等荒谬建议受到批评,还曾重复“巴拉克·奥巴马是穆斯林”的错误说法。
另有报道指出,AI生成的搜索摘要还曾提供不准确、可能带来风险的健康信息。Futurism援引一项由AI初创公司Oumi开展、受《纽约时报》委托的分析称,AI生成摘要的准确率约为91%。即使这一比例看起来很高,放到Google庞大的搜索规模中,仍意味着会持续出现数量可观的错误答案。
至于Gemini被指生成不准确种族图像的具体细节,现有材料没有提供足够证据,不能在此视为已被证实。但从更广泛的层面看,这些案例反复指向同一治理难题:AI系统可能把训练数据、网络内容或模型关联中的偏见,包装成语气自信、看似中立的答案;问题往往要等到用户公开测试后,才会引发修正。
AI Overview更适合作为查找信息的起点,而不是最终结论。尤其当它涉及人身安全、宗教、国籍、种族或其他身份议题时,用户可以:
最重要的是,现实中的安全判断应建立在具体行为和现场情况上,而不应从一个人的国籍、种族或宗教身份推断其危险性。这场争议提醒人们,公平不仅要写进AI的安全规则,也必须成为系统上线前测试和评估的一部分。
争议的关键并不是AI提到“人身安全”。如果用户明确表示自己受到威胁,提供安全建议当然可能是合理的。问题在于,在几乎相同的提示结构下,系统似乎根据被提及的身份改变了警告强度。这种做法可能把一般性的安全提醒,转化为“某些群体天生更危险”的暗示。
Reddit用户将这些回答形容为“双重标准”。Futurism则认为,部分回答中的紧急处置语言可能强化种族刻板印象。
一些网络活动人士尤其关注穆斯林与以色列人提示之间的差异,并将其指责为伊斯兰恐惧症或反穆斯林偏见。
美国伊玛目奥马尔·苏莱曼(Omar Suleiman)也分享了相关回答。他反对因为一个人的宗教身份,就把与其独处设定为危险情境。随后一张归因于其账号的截图显示,系统给出了更中性的说法:与穆斯林独处是正常且安全的,与任何其他人独处没有本质区别;共同信仰并不能决定一个人的品格或威胁程度。
这张后续截图说明,用户确实看到了不同版本的回答。但现有材料无法确定回答何时发生变化、修改是否已普遍 लागू,或Google是否专门因苏莱曼的发帖而作出调整。因此,更准确的表述是:相关结果后来出现了中性版本,而不是已经证实Google完成了全面修复。
现有报道显示,Google承认这一类结果“不应如此”,并表示正在进行改进。Google也提供了常规反馈机制:用户可以在AI Overview下方点击“不满意”或“报告问题”,并选择结果不准确、有偏见或存在其他问题等类别。
不过,现有证据没有包含Google对这些不平等回答的详细技术解释。因此,目前无法判断问题主要来自基础模型本身、检索到的网页内容、安全系统逻辑,还是多个环节叠加造成的结果。
AI Overview会直接显示在Google搜索结果顶部,因此生成式回答即使错误,也容易被用户当成权威结论。过去,这项功能曾因给披萨加胶水、建议人们吃岩石等荒谬建议受到批评,还曾重复“巴拉克·奥巴马是穆斯林”的错误说法。
另有报道指出,AI生成的搜索摘要还曾提供不准确、可能带来风险的健康信息。Futurism援引一项由AI初创公司Oumi开展、受《纽约时报》委托的分析称,AI生成摘要的准确率约为91%。即使这一比例看起来很高,放到Google庞大的搜索规模中,仍意味着会持续出现数量可观的错误答案。
至于Gemini被指生成不准确种族图像的具体细节,现有材料没有提供足够证据,不能在此视为已被证实。但从更广泛的层面看,这些案例反复指向同一治理难题:AI系统可能把训练数据、网络内容或模型关联中的偏见,包装成语气自信、看似中立的答案;问题往往要等到用户公开测试后,才会引发修正。
AI Overview更适合作为查找信息的起点,而不是最终结论。尤其当它涉及人身安全、宗教、国籍、种族或其他身份议题时,用户可以:
最重要的是,现实中的安全判断应建立在具体行为和现场情况上,而不应从一个人的国籍、种族或宗教身份推断其危险性。这场争议提醒人们,公平不仅要写进AI的安全规则,也必须成为系统上线前测试和评估的一部分。