AI审核不靠谱?微软Bing被曝显示儿童色情内容

简介: 微软可能需要像今日头条学习,加强人工审核了。

微软可能需要像今日头条学习,加强人工审核了。

微软在2019年年初就遭遇了不少的危机,今天,据外媒报道,微软的Bing搜索中有一些相关的关键字,正在为恋童癖者提供大量的儿童色情内容,微软回复正在努力修复中。

TB1NFg1Bb2pK1RjSZFsXXaNlXXa.png

安全公司的调研中发现,微软必应搜索不仅仅会在搜索结果中返回裸体儿童照片,如果用户点击这些图片,必应也会在类似图片功能中展示更多非法虐待儿童图像,他们还会向用户推荐其他类似搜索关键词,从而跳转出更多的儿童色情内容。

然而,谷歌的类似搜索却没有像必应这样出现明显的非法图像以及内容。对此,微软必应和人工智能产品副总裁乔迪·里伯斯(Jordi Ribas)表示,“研究人员发现的搜索结果确实违反了网站规则,公司正在努力防止此类事故的发生。”

此前,微软宣布正在通过他们的AI研究成果让必应搜索变得更加智能。去年,他们还通过使用专门的人工智能计算硬件BrainWave,使机器学习模型的性能提高10倍以上,增强了微软必应搜索引擎的功能。

而在儿童色情内容上,微软还开创了PhotoDNA技术,实现儿童性虐图片检测的自动化,让此类非法图片可以由电脑程序而非工程师自动识别。

TB1kPA2BhTpK1RjSZR0XXbEwXXa.png

据了解,PhotoDNA可以将图片转化为常见的黑白格式,还能将图片尺寸调整至指定大小。然后该技术会把图片分成一个个正方形,同时给每一个正方形内存在的特有底纹分配一个数值。这些数值结合在一起以后,就代表一个图像文件的“PhotoDNA签名”。这种独一无二的签名可以被用于与其他在线图片进行比对。

早些时候,微软已经将PhotoDNA技术应用在必应上,用来识别儿童性虐图片,阻止这些照片在网上进一步传播。

现在,必应却被曝出这种负面事件,可以看到这项AI技术似乎并没有预料中的有效,技术并没有过滤掉那些非法色情的内容。

当然,不仅仅是搜索引擎会遇到这种问题,社交平台、内容分发平台也经常被曝出各种性虐色情内容传播,其实这也在某种程度上反映了整个科技行业的现状,当科技公司过于追求营收的增长以及效率,就会忽视对公众利益的保护,比如如何在机器审核和人工审核之间的达到平衡。

相关文章
|
数据采集 人工智能 自然语言处理
AI终于能听懂宝宝说话了!ChildMandarin:智源研究院开源的低幼儿童中文语音数据集,覆盖22省方言
ChildMandarin是由智源研究院与南开大学联合推出的开源语音数据集,包含41.25小时3-5岁儿童普通话语音数据,覆盖中国22个省级行政区,为儿童语音识别和语言发展研究提供高质量数据支持。
1596 20
AI终于能听懂宝宝说话了!ChildMandarin:智源研究院开源的低幼儿童中文语音数据集,覆盖22省方言
|
人工智能 自然语言处理 监控
基于DeepSeek R1改进的AI安全模型!MAI-DS-R1:微软开源AI安全卫士,敏感话题响应率高达99.3%
微软开源的MAI-DS-R1是基于DeepSeek R1改进的AI模型,通过后训练优化将敏感话题响应率提升至99.3%,同时将有害内容风险降低50%,保持原版推理能力并增强多语言支持。
1577 3
基于DeepSeek R1改进的AI安全模型!MAI-DS-R1:微软开源AI安全卫士,敏感话题响应率高达99.3%
|
机器学习/深度学习 存储 人工智能
Qlib:华尔街颤抖!微软开源金融AI量化投资神器,助力智能投研
Qlib是微软亚洲研究院推出的开源AI量化投资平台,提供从数据处理、模型训练到组合管理的全流程支持,内置高性能数据基础设施和多种机器学习模型。
5645 87
Qlib:华尔街颤抖!微软开源金融AI量化投资神器,助力智能投研
|
人工智能 自然语言处理 数据可视化
Data Formulator:微软开源的数据可视化 AI 工具,通过自然语言交互快速创建复杂的数据图表
Data Formulator 是微软研究院推出的开源 AI 数据可视化工具,结合图形化界面和自然语言输入,帮助用户快速创建复杂的可视化图表。
1581 10
Data Formulator:微软开源的数据可视化 AI 工具,通过自然语言交互快速创建复杂的数据图表
|
机器学习/深度学习 人工智能 搜索推荐
BioEmu:微软黑科技炸场!生成式AI重构蛋白质模拟:千倍效率碾压传统计算,新药研发周期砍半
BioEmu 是微软推出的生成式深度学习系统,可在单个 GPU 上每小时生成数千种蛋白质结构样本,支持模拟动态变化、预测热力学性质,并显著降低计算成本。
982 2
BioEmu:微软黑科技炸场!生成式AI重构蛋白质模拟:千倍效率碾压传统计算,新药研发周期砍半
|
人工智能 运维 Prometheus
AIOpsLab:云服务自动化运维 AI,微软开源云服务 AI 框架,覆盖整个生命周期
AIOpsLab 是微软等机构推出的开源框架,支持云服务自动化运维,涵盖故障检测、根本原因分析等完整生命周期。
936 13
AIOpsLab:云服务自动化运维 AI,微软开源云服务 AI 框架,覆盖整个生命周期
|
人工智能 安全 数据中心
D1net阅闻 | 微软CEO对话特朗普和马斯克:豪掷800亿美元建AI数据中心
D1net阅闻 | 微软CEO对话特朗普和马斯克:豪掷800亿美元建AI数据中心
|
缓存 人工智能 自然语言处理
微软发明全新LLM语言,AI智能体交互效率翻倍!
微软发布DroidSpeak技术,优化大型语言模型(LLM)间的通信,显著提升AI智能体交互效率。该技术通过嵌入缓存和键值缓存重用,减少预填充延迟,降低高达50%的延迟,同时保持高质量生成。DroidSpeak适用于多种AI任务,提高协作效率,但在资源受限环境和处理模型差异性方面仍面临挑战。
592 3
|
人工智能 Linux API
PromptWizard:微软开源 AI 提示词自动化优化框架,能够迭代优化提示指令和上下文示例,提升 LLMs 特定任务的表现
PromptWizard 是微软开源的 AI 提示词自动化优化框架,通过自我演变和自我适应机制,迭代优化提示指令和上下文示例,提升大型语言模型(LLMs)在特定任务中的表现。本文详细介绍了 PromptWizard 的主要功能、技术原理以及如何运行该框架。
1412 8
PromptWizard:微软开源 AI 提示词自动化优化框架,能够迭代优化提示指令和上下文示例,提升 LLMs 特定任务的表现
|
人工智能 自然语言处理 JavaScript
微软开源课程!21节课程教你开发生成式 AI 应用所需了解的一切
微软推出的生成式 AI 入门课程,涵盖 21 节课程,帮助开发者快速掌握生成式 AI 应用开发,支持 Python 和 TypeScript 代码示例。
1375 15