Clarifai宣布推出端到端的AI审核解决方案

新知榜官方账号

2023-11-11 16:35:16

背景

将互联网上的色情、毒品、暴力和其它不适当的内容过滤并不是一件容易的事。Facebook在全球的内容审核员从2017年的4500名增长至现在的7500名。而且在今年4月份,谷歌YouTube表示,在去年的10月份到12月份之间,他们已经下架了超过800万个与其政策相违背的视频,其中20%的视频是由上千名员工组成的团队标记的。

Clarifai认为,AI能够帮助减轻工作负担。该公司今天宣布了一个端到端的审核解决方案,即使用了计算机视觉来分析用户生成的图片和视频,并且当检测到有攻击性或者不适当的内容时,会立刻对其进行标记。该解决方案将于本周发布公开测试版本。

解决方案

Clarifai的审核解决方案利用了公司现有的机器学习模型,通过一些预先配置的过滤器标签,如“明确性”、“建议性”、“暴力”、“毒品”、“NSFW”、“SFW”和自定义的标签来对比用户生成的内容。用户先将图片发送给Clarifai,然后该系统会将分析数据的方式进行可视化。经过分析的每条内容都会生成指示匹配可能性的概率分数。将AI应用到内容审核并不是一个新的概念。Microsoft Azure的Content Moderator(内容审核器)是一个自动的审核服务,结合了AI和人工审核来检测具有潜在攻击性的图片、文本和视频。Alibaba Cloud也有和Content Moderation相类似的产品,即使用了深度学习来寻找用户生成的图片和视频中的暴力、恐怖和钓鱼内容,Amazon也在其AI驱动的内容检测服务Rekognition中使用了深度学习技术。

不足之处及解决办法

在投入使用阶段,这些系统并不能保证万无一失。例如,Facebook算法就标记了包含性裸露的历史雕像图片,并自动删除了讽刺越南战争的图片。YouTube也在无意中将合法的广告标记为钓鱼信息。但是Clarifai表示他们正在采取措施来缓解潜在的问题。Web仪表盘提供的控制权限允许用户将内容认定和否定过程自动化,并且当内容无法达到具体的置信度阈值时,会为人工审核员提供完整的支持。

总结

Clarifai的审核解决方案利用了机器学习模型和计算机视觉来分析用户生成的图片和视频,当检测到有攻击性或者不适当的内容时,会立刻对其进行标记。该公司表示在图片和视频识别方面的准确率将高达99%。与审核解决方案一同发布的还有增强版的General Model,并且Moderation、Celebrity、Face Detection、Textures&Patterns、General Embedding和Faceb Embedding系统也将开放使用。

本页网址:https://www.xinzhibang.net/article_detail-19708.html

寻求报道,请 点击这里 微信扫码咨询

关键词

Clarifai 审核解决方案 AI

分享至微信: 微信扫码阅读

相关工具

相关文章