阿里研发AI黑科技，助力建设互联网清朗环境
互联网内容越来越朝着视频化方向发展，短视频处于爆发期，一些不法分子试图利用视频风口牟利。3月底，深圳警方打掉了一起以短视频app为载体，大肆从事淫秽传播、网络赌博以及网络诈骗等犯罪活动。
最近，阿里安全图灵实验室发布了一项关于社会文化的研究，这是一种新型视频描述方法（sgr），可用于视频内容安全和视频检索等场景，助力建设互联网清朗环境。该研究成果已经被人工智能国际顶会cvpr2021（oral）收录。
让ai做“阅读理解”
现有的密集型视频描述生成方法采用自底向上的方式，即先生成大量的事件候选片段，再为每个片段独立的生成描述，从而组合得到密集型视频描述。然而，视频中事件具有很强的多样性，既可以简单到是一个动作，也可以复杂到是若干事件的组合，这导致事件候选片段的生成目标不明确，对应的密集型描述不够连贯和准确，且充斥着大量冗余。
对此，研究者提出了自顶向下的密集型视频描述方法，即sgr。sgr可以实现两类基本功能，一是让ai对视频内容做“阅读理解”，生成一段长文本描述视频中心内容，二是可以根据描述性的文本精准匹配视频中的相关片段。此前，必须人工定义关键词词库后才能“指挥”ai命中检索，这项ai技术的目标是仅通过输入自然语言就能实现检索，对ai“说句话”，就能找到相应片段。
“视频中如果有人拿起鼠标，点击电脑，然后脱掉衣服，呈现黄赌毒等相关违规信息，以前的技术路径上，ai可能还要分析脱掉衣服之前的动作，其实拿鼠标和点击电脑与后面的违规内容没什么关联，无需提取这些信息。”该研究第一作者、阿里安全图灵实验室实习算法工程师青崧介绍道。sgr解决了这个问题。
给定一个视频，ai可对视频的关键候选片段无缝衔接成一个完整的故事，保证了密集型描述的连贯性，且减少了冗余。为了进一步增加视频片段的描述细节，研发人员设计了描述提升模块，以初步得到的密集型视频描述和视频片段为基准，提出专用于描述质量提升的强化学习策略，来生成细节更丰富的密集型视频描述。
方法结构如下图所示：
输入一段视频，本方法首先使用一个视频编码器（）来为所有视频帧提取表征。接着，段落解码器（）根据视频帧的表征生成一段由多句描述组成的段落。
然后，由描述定位器（）对段落中的每句描述在视频中的发生时刻进行定位。最后，描述提升模块，即描述解码器（）接受由输出的视频片段描述和由定位出的视频片段表征，并输出细节更丰富的视频片段描述。
该项研究的共同作者、阿里安全图灵实验室高级算法工程师雍秦介绍，虽然目前这个技术还无法做到“1分钟讲清楚一部电影”，但可做到“两句话讲清楚一个10分钟以内的短视频”，这意味着通过该技术未来可迅速判断整个视频的关键信息是否包含黄赌毒等违规内容。
更快更准识别违规风险内容
通过这两个功能，ai能快速识别、准确定位违规片段，无需人类鉴黄师反复回看确认。雍秦透露，在sgr技术研究基础上，阿里安全近期还将研发低门槛、高可用的“鉴黄”ai工具，让ai对视频不同片段打出“危险指数”，依赖信息提取直接关联高亮风险片段，让ai鉴黄更智能、高效。
未来，在实际应用场景中，通过ai来进行不良内容识别的研判准确性和效率将大幅提高，比如判断视频内容中是否有“一个穿着暴露萝莉装的女孩鸭子坐着在录吃播”，以往要形成“暴露萝莉装”“鸭子坐”“吃播”三个标签，每次依据一个标签进行一轮审核，判断视频内容是否涉嫌低俗，三轮审核交叉验证。
创新工具应用后，ai只用输入“一个穿着暴露萝莉装的女孩鸭子坐着在录吃播”这句话进行一轮研判，准确性也更高。
图说：阿里安全近期将研发低门槛、高可用的“鉴黄”ai工具，该图为示意模型。阿里安全图灵实验室资深算法专家华棠指出，阿里安全一直希望从源头守护安全，这是阿里安全方法论“新一代安全架构”的核心理念。“互联网上每天产生海量视频，单靠人力无法维护互联网清朗环境，违规视频危及大众心理健康和财产安全，创新算法可以有更多用武之地，构建美好安全的网络生活。
5个显卡术语的详细剖析
免维护铅酸蓄电池拆解与维修
华为云政务大数据解决方案在市场的表现与现有能力排名第一
TYAN推出了多款性能优越的嵌入式主板
Nervos CKB 应用层有什么优势
阿里研发AI黑科技，助力建设互联网清朗环境
天津日报报道芯灵通：为国家科技创新增长提供‘芯’动能
嵌入式智能系统在智能家居中有何应用
苹果Apple Watch，智能穿戴设备江湖上的王者
努比亚电竞红魔手机怎么样?红魔游戏手机在刺激战场游戏中可达满帧
C程序设计基础-指针
电池储能安全传感器解决方案，对动力电池热失控进行监控
iPhone销售遭遇困境,PCB厂商积极开拓非苹订单趋势明显
谈谈小功率电源变压器的初级空载电流
一位资深前端工程师的总结
AutoML，AI“兵家必争”之技，谁是最强王者？
国芯思辰|铁电存储器PB85RS128可用于充电桩，性能兼容富士通
红米Pro2什么时候上市？最新消息：红米Pro2渲染图曝光，全屏+骁龙660，千元出头！你不心动吗？
温差电技术的历史及现状 半导体致冷器的应用情况介绍及发展前景
亚马逊谷歌等云计算增速减缓，中国厂商凶猛，已将业务触角伸向亚太地区
最近，阿里安全图灵实验室发布了一项关于社会文化的研究，这是一种新型视频描述方法（sgr），可用于视频内容安全和视频检索等场景，助力建设互联网清朗环境。该研究成果已经被人工智能国际顶会cvpr2021（oral）收录。
让ai做“阅读理解”
现有的密集型视频描述生成方法采用自底向上的方式，即先生成大量的事件候选片段，再为每个片段独立的生成描述，从而组合得到密集型视频描述。然而，视频中事件具有很强的多样性，既可以简单到是一个动作，也可以复杂到是若干事件的组合，这导致事件候选片段的生成目标不明确，对应的密集型描述不够连贯和准确，且充斥着大量冗余。
对此，研究者提出了自顶向下的密集型视频描述方法，即sgr。sgr可以实现两类基本功能，一是让ai对视频内容做“阅读理解”，生成一段长文本描述视频中心内容，二是可以根据描述性的文本精准匹配视频中的相关片段。此前，必须人工定义关键词词库后才能“指挥”ai命中检索，这项ai技术的目标是仅通过输入自然语言就能实现检索，对ai“说句话”，就能找到相应片段。
“视频中如果有人拿起鼠标，点击电脑，然后脱掉衣服，呈现黄赌毒等相关违规信息，以前的技术路径上，ai可能还要分析脱掉衣服之前的动作，其实拿鼠标和点击电脑与后面的违规内容没什么关联，无需提取这些信息。”该研究第一作者、阿里安全图灵实验室实习算法工程师青崧介绍道。sgr解决了这个问题。
给定一个视频，ai可对视频的关键候选片段无缝衔接成一个完整的故事，保证了密集型描述的连贯性，且减少了冗余。为了进一步增加视频片段的描述细节，研发人员设计了描述提升模块，以初步得到的密集型视频描述和视频片段为基准，提出专用于描述质量提升的强化学习策略，来生成细节更丰富的密集型视频描述。
方法结构如下图所示：
输入一段视频，本方法首先使用一个视频编码器（）来为所有视频帧提取表征。接着，段落解码器（）根据视频帧的表征生成一段由多句描述组成的段落。
然后，由描述定位器（）对段落中的每句描述在视频中的发生时刻进行定位。最后，描述提升模块，即描述解码器（）接受由输出的视频片段描述和由定位出的视频片段表征，并输出细节更丰富的视频片段描述。
该项研究的共同作者、阿里安全图灵实验室高级算法工程师雍秦介绍，虽然目前这个技术还无法做到“1分钟讲清楚一部电影”，但可做到“两句话讲清楚一个10分钟以内的短视频”，这意味着通过该技术未来可迅速判断整个视频的关键信息是否包含黄赌毒等违规内容。
更快更准识别违规风险内容
通过这两个功能，ai能快速识别、准确定位违规片段，无需人类鉴黄师反复回看确认。雍秦透露，在sgr技术研究基础上，阿里安全近期还将研发低门槛、高可用的“鉴黄”ai工具，让ai对视频不同片段打出“危险指数”，依赖信息提取直接关联高亮风险片段，让ai鉴黄更智能、高效。
未来，在实际应用场景中，通过ai来进行不良内容识别的研判准确性和效率将大幅提高，比如判断视频内容中是否有“一个穿着暴露萝莉装的女孩鸭子坐着在录吃播”，以往要形成“暴露萝莉装”“鸭子坐”“吃播”三个标签，每次依据一个标签进行一轮审核，判断视频内容是否涉嫌低俗，三轮审核交叉验证。
创新工具应用后，ai只用输入“一个穿着暴露萝莉装的女孩鸭子坐着在录吃播”这句话进行一轮研判，准确性也更高。
图说：阿里安全近期将研发低门槛、高可用的“鉴黄”ai工具，该图为示意模型。阿里安全图灵实验室资深算法专家华棠指出，阿里安全一直希望从源头守护安全，这是阿里安全方法论“新一代安全架构”的核心理念。“互联网上每天产生海量视频，单靠人力无法维护互联网清朗环境，违规视频危及大众心理健康和财产安全，创新算法可以有更多用武之地，构建美好安全的网络生活。
5个显卡术语的详细剖析
免维护铅酸蓄电池拆解与维修
华为云政务大数据解决方案在市场的表现与现有能力排名第一
TYAN推出了多款性能优越的嵌入式主板
Nervos CKB 应用层有什么优势
阿里研发AI黑科技，助力建设互联网清朗环境
天津日报报道芯灵通：为国家科技创新增长提供‘芯’动能
嵌入式智能系统在智能家居中有何应用
苹果Apple Watch，智能穿戴设备江湖上的王者
努比亚电竞红魔手机怎么样?红魔游戏手机在刺激战场游戏中可达满帧
C程序设计基础-指针
电池储能安全传感器解决方案，对动力电池热失控进行监控
iPhone销售遭遇困境,PCB厂商积极开拓非苹订单趋势明显
谈谈小功率电源变压器的初级空载电流
一位资深前端工程师的总结
AutoML，AI“兵家必争”之技，谁是最强王者？
国芯思辰|铁电存储器PB85RS128可用于充电桩，性能兼容富士通
红米Pro2什么时候上市？最新消息：红米Pro2渲染图曝光，全屏+骁龙660，千元出头！你不心动吗？
温差电技术的历史及现状 半导体致冷器的应用情况介绍及发展前景
亚马逊谷歌等云计算增速减缓，中国厂商凶猛，已将业务触角伸向亚太地区