选项
首页
新闻
基于氛围的图像标注存在重大风险

基于氛围的图像标注存在重大风险

2026-02-21
159

尽管这些匿名图像评估员往往收入微薄甚至分文未得,但他们通过判定内容是否"有害",对人们的生活拥有着巨大影响力。谷歌最新一项重大研究表明,这些标注员常会形成自己对"有害"或冒犯性内容的判断标准——无论他们对某张图片的反应多么离奇或主观。那么,问题究竟出在哪里呢?

 

观点本周,谷歌研究院与谷歌Mind团队联合发布新论文,汇集13位研究者探讨图像标注员的"直觉判断"是否应影响算法对图像的评级——即便这些直觉与既定评级准则相冲突。

这个问题与你息息相关,因为标注者一致认可的冒犯性标准往往会嵌入自动化审核系统、法律对"淫秽"或"不可接受"内容的定义(例如英国即将推出的NSFW防火墙*,澳大利亚也将很快跟进),以及社交媒体等平台的内容评估机制。

简言之,对冒犯性内容的判定标准越宽泛,潜在审查范围就越广。

氛围审查

研究未止步于此。它还揭示图像评分者常基于"可能冒犯他人"而非"自我感受"实施更严格审查。此外,低质量图像常引发安全担忧,尽管图像质量与内容本身并无关联。

论文在结论部分着重强调这两项发现,仿佛其核心论点有所欠缺——但研究者仍坚持发表。

虽然这在学术出版中并不罕见,但细读之下却能发现更令人不安的潜流:标注实践正朝着一种只能称为"氛围标注"的方向发展:

"我们的发现表明,现有框架需要纳入主观和情境维度,例如情绪反应、隐性判断以及对伤害的文化解读。标注者频繁使用情绪化语言且偏离预定义伤害标签的现象,凸显了当前评估实践的缺陷。

扩展标注指南,纳入多元文化与情感解读的示例,有助于弥补这些缺口。"

这篇插图稀少的新论文开篇列举的实例清晰易懂且通俗易懂,尽管其核心内容实际含糊不清,引发诸多疑问。在此,每幅图像下方均可见标注者

新论文采用直观示例引发广泛共鸣,但其核心内容却提出更为复杂的议题。图中每张图像均附有标注者情绪反馈。来源:https://arxiv.org/pdf/2507.16033

乍看之下,这似乎是为更精准界定图像中的"伤害"所做的合理尝试——目标值得肯定。但论文反复暗示实现这一目标可能既不现实也不可取:

"研究表明现有框架需纳入主观与情境维度,如情感反应、隐性判断及文化层面的伤害解读。标注者频繁使用情感化语言且偏离预设伤害标签的现象,凸显了当前评估实践的缺陷。

扩展标注指南,纳入多元文化与情感解读的示例,有助于弥补这些缺口[…]

[…] 标注者对模糊图像的推理过程往往反映其个人、文化及情感视角,这些难以通过支架教学或标准化手段解决。"

难以理解"纳入多元文化与情感解读示例"如何契合理性评级体系。作者反复探讨此问题却未给出明确解决方案,使其核心论点——即便涉及无形心理因素——也显得受"氛围感"驱动。

简言之,此类注释标准的扩展可能导致任何引发标注者强烈反应的内容——乃至整类主题——遭到压制或模糊处理。

二元评判

量化图像文字的危害性本就困难重重,尤其当"高雅"与"通俗"文化常如艺术文学般相互交融时。这催生了早期"氛围式"审查——淫秽内容的判定不再遵循严格定义,而是依据"见之自知"的原则。

在关于同理心与细微差别的广泛讨论之下,该论文微妙地质疑了"暴力"、"裸露"、"仇恨"等集中化标准化分类的权威性——正是这些分类使平台能够以合理精度实施可扩展的内容审核。

新兴观点认为,唯有去中心化、主观性强且具备语境感知能力的人类判断,才能准确评估生成式人工智能的输出内容。

但这种方法难以规模化。你无法凭"感觉"和个人经验过滤数十亿张图片。伤害必须量化为具体属性;过滤系统需要明确边界;边界案例需要更新指南——正如应对特殊诉求时有时需要新法律。

相反,该论文似乎主张建立自动扩展范围的审核系统——其审慎程度甚至可能因单个标注者的强烈个人反应,而惩罚一张对他人毫无冒犯性的图像。

道德扩张

尽管研究性质偏探索性,论文仍采用科学方法:作者构建了识别框架(虽未严格量化)以捕捉标注者对图像的多元反应,并分析这些反应如何随性别及其他人口统计特征变化。

除分析伤害焦点†外,研究还考察了标注者附加评论中的"道德推理"。参与者需对包含图像、提示词及相关文本的修改版数据集进行标注。

该"道德情感自动评分器"基于道德基础理论设计,旨在捕捉关怀、平等、比例、忠诚、权威 和纯洁等道德价值——由于该心理模型具有流动性特征,并不适合构建大规模评级系统所需的具体定义。

受该理论启发,作者引入了恐惧、愤怒、悲伤、厌恶、困惑和 诡异感等额外安全维度。

作者对恐惧维度进行了详细阐述:

"许多标注者使用'恐怖'(如扭曲面孔或枪口对准儿童等暴力暗示图像)、'令人不安'(如'目睹人被碾压的画面极其恶心,令人痛苦不安', 或‘令人不安且似血迹’描述红色颜料),以及‘令人不适’(如‘男孩图像存在多重扭曲…因其看似在护栏错误一侧玩耍而令人反感’)。

下图显示"恐惧"是最常提及的情绪(233次提及)。虽然其中近半数与暴力内容相关,但恐惧提及量第二高的内容被认定为无害内容。

情绪相关术语在伤害类别的分布情况,其中柱状图高度表示评论占比,柱内显示计数,各类别上方标注总评论数。

情感相关术语在危害类别中的分布,柱高表示评论占比,柱内显示计数,各类别上方标注总评论数。

关于这些新安全维度,作者指出:

"这些新兴主题凸显出关键需求:必须通过整合主观性、情感性与感知性要素来完善人工智能图像评估框架。"

此方向存在风险,因其可能导致标注流程依据个人反应随意制定规则——而非要求所有标注者遵循统一标准。

若存在经济动机,则在于该模型实现了超大规模的人工标注:参与者自主定义规则的无摩擦、自我调节系统。

在标准标注模式下,规则需经共识达成并由标注者遵循。而论文提出的模型削弱或消除了这种监督机制——这意味着只要有一人感到冒犯,图像就可能被标记,部分原因在于达成共识既耗时又耗资。

罗夏墨迹测试式判定

标注的宗旨是通过专家监督、共识达成(或两者兼备)生成精准描述。将明确的危害等级体系转化为高度主观的"直觉式"流程,无异于对罗夏墨迹测验进行标注。

例如论文指出,部分标注者将图像质量缺陷(如JPEG伪影或技术瑕疵)解读为"令人不安"或"暗示危害":

"尽管任务说明未提及图像质量要求,标注者仍将这些质量瑕疵解读为语义意义。

"有标注员评论道:'这张图片完全不具危害性,只是人物面部略有变形。'同样地,其他标注员将图像缺陷视为蓄意伤害,赋予故障画面情感意义。例如有人将变形面孔解读为'痛苦的征兆'。"

这种方法将主观情绪化或情境特定的反应置于预设安全标签之上,可能导致系统随意标记有害内容——尤其针对可能冒犯特定利益群体的素材,将引发临时性内容删除或重新分类的"寒蝉效应"。

 

 

论文《只是张奇怪的照片》:从多元标注者视角评估生成式AI图像安全标注任务中的"安全性"现已发布于Arxiv平台。

*此处为简化表述,因非核心论点。新法规要求违规网站必须自主监管、实施高成本的审核与年龄验证系统(仅大型平台可行),或自行承担费用封锁英国用户访问。

† 常被简化为"想想孩子们"梗图,该梗讽刺了利用他人道德责任感达成表面利他目的的行为。

 

首次发布于2025年7月25日星期五

相关文章
人工智能幻觉几乎引发美国军事行动 人工智能幻觉几乎引发美国军事行动 在春季,美国官员在军用飞机已经升空时做出了一项令人震惊的发现:针对一艘中国船只进行武装打击的情报完全由一个人工智能聊天机器人捏造。据美国有线电视新闻网(CNN)周五报道,该行动在最后一刻被取消, narrowly 避免了一场与中国的潜在冲突。这一事件凸显了军事领导人和外部专家日益增长的担忧:随着决策者越来越多地依赖人工智能,这些系统产生的错误会在受到审查之前沿着指挥链向上蔓延。该情报报告在与美国-伊朗冲突期间流传,声称该船只正在运输用于核武器计划的组件。错误信息源自一名特种作战司令部分析师
英伟达的莱斯·卡普斯:在 TechCrunch Disrupt 2026 上等待 ChatGPT 时刻的机器人 英伟达的莱斯·卡普斯:在 TechCrunch Disrupt 2026 上等待 ChatGPT 时刻的机器人 ChatGPT 于 2022 年 11 月的发布,突然将人工智能从理论炒作转变为日常实用工具,从根本上改变了我们与大型语言模型的交互方式。机器人技术长期以来一直是讨论和发展的主题,但缺乏那个单一的突破时刻。在 TechCrunch Disrupt 2026 上,Nvidia Inception 全球物理 AI 负责人 Les Karpas 将在其“现实世界 AI 舞台”环节 《机器人正在等待它们的 ChatGPT 时刻。阻碍因素何在》 中探讨这些障碍及潜在解决方案。Image Credits:T
Anthropic 警告称,小型 AI 模型可能在年底前实现自我复制 Anthropic 警告称,小型 AI 模型可能在年底前实现自我复制 Anthropic has issued another urgent warning: AI models could potentially learn to self-replicate within mere months, and once this process begins, there is effectively no "off" switch. According to the company's latest research, these programs lack a
相关专题推荐
设计与艺术 顶级AI插画工具:更快地创作编辑类场景和封面插图
顶级AI插画工具:更快地创作编辑类场景和封面插图

2026年最新高评分AI插画工具:我们精心挑选的这份清单汇集了功能强大的顶级工具,助您快速创作令人惊艳的编辑场景和引人注目的封面艺术。每款工具都经过了严格的实际测试,并提供了免费版与付费版的对比,帮助您找到最适合您工作流程的工具。 立即尝试这些必试解决方案,释放您的AI优势,提升创作效率。立即访问 XIX.AI 探索更多。

10 个工具
xix.ai
教育与学习 备考首选的顶尖AI辅导老师:练习数学、科学和英语
备考首选的顶尖AI辅导老师:练习数学、科学和英语

2026年最新、评分最高的考试备考AI辅导工具现已登陆XIX.AI!我们精心筛选的这份清单汇集了多款功能强大、颠覆传统的工具,提供免费与付费版本的对比、实际测试以及每周更新的排行榜。它们能帮助你提升写作效率、简化复杂主题的学习,并释放你的学术潜能。 立即探索,发现最适合您的备考工具,今天就开始创作,释放您的AI优势!

10 个工具
xix.ai
金融 用于个人财务管理的 AI 预算规划工具
用于个人财务管理的 AI 预算规划工具

2026 年最新最佳顶级评分 AI 预算规划工具,专为个人财务管理打造,现已登陆 XIX.AI!本精选合集收录了强大且具颠覆性的解决方案,助您开展实际测试、理解消费习惯,并制定个性化计划以提升生产力。享受免费与付费版的对比及详细排名。这些必试工具旨在简化财务管理,助您释放 AI 优势。立即探索!

11 个工具
xix.ai
健康养生 AI睡眠追踪助手:通过养成更好的睡前习惯来促进身体恢复
AI睡眠追踪助手:通过养成更好的睡前习惯来促进身体恢复

2026年最新精选高评分AI睡眠追踪助手,助您实现最佳恢复效果。这份全面更新的每周指南汇集了强大的工具,提供实际测试结果、免费与付费版本对比以及详细排名,助您找到必试的解决方案,从而提升睡眠质量并养成更好的就寝习惯。 立即访问 XIX.AI,解锁您的AI优势。

10 个工具
xix.ai
数据分析 用于产品和收入分析的 AI SQL 辅助工具
用于产品和收入分析的 AI SQL 辅助工具

2026年最新、最受欢迎、评分最高的AI SQL辅助工具,助力产品与营收分析! XIX.AI 精心遴选了一系列功能强大、颠覆性的必试工具,这些工具均经过每周更新的排名体系进行实战测试。它们能通过加速数据分析、简化复杂查询并生成精准洞察,帮助用户显著提升工作效率,从而推动更明智的商业决策。立即探索,发现最适合您的工具,释放您的AI优势!

14 个工具
xix.ai
教育与学习 最佳的、兼具教学功能的AI作业助手:学习概念,而不仅仅是答案
最佳的、兼具教学功能的AI作业助手:学习概念,而不仅仅是答案

2026年最新最佳高评分AI作业助手:不仅提供答案,更传授核心概念。专为学生打造的强大工具,精选必试清单,每周更新,免费与付费版本对比,真实使用测试,精准排名,助您充分释放学习潜能。立即探索,发现最适合您的工具,让学习更高效。

10 个工具
xix.ai
评论 (1)
0/500
DonaldGonzález
DonaldGonzález 2026-08-29 20:00:15

画像ラベリングの匿名作業員の待遇と権限の問題、Googleの研究で浮き彫りに。低賃金で高リスクの責任を背負う人々の苦境に注目。AIの透明性確保には人間の労働環境改善も不可欠。

OR