ai 和 aigc 目前已经与我们的工作和生活深度融合, ai将如何影响音视频开发?ai在给视频编解码带来画质提升的收益时,是否会增加成本?在最近落下帷幕的2023年livevideostackcon2023音视频技术大会上海站中,关于ai和aigc的讨论远比以往更加火热。大模型、多模态、aigc工具……很多专家认为,ai和aigc一定会对整个编解码行业产生巨大的革新,但同时也面临着更大的挑战。
英特尔不仅在大会上分享了音视频领域的前沿技术洞察,还联合livevideostack为各位技术人们准备了一次特别的mini圆桌晚宴,邀请到了互联网头部企业的技术大咖们,既有技术讨论,又有趣味问答,通过“yes”or“no”的互动方式,引发了嘉宾们的高度参与热情和对音视频技术应用趋势的激烈讨论。
向左滑动看更多精彩瞬间
ai处理对音视频来说
是必须的吗?
在大会现场,英特尔至强产品线软件架构师谢义认为,ai将会越来越多地应用到音视频处理当中。但随着aigc的广泛使用,智能化编码将面临着越来越大的性能瓶颈。而目前人工智能模型训练对算力的需求,原有的单一的cpu或gpu的单架构形态已经无法完全满足。谢义认为,基于cpu服务器的全链路智能化编码将成为未来的趋势并解决上述挑战。
英特尔至强产品线软件架构师谢义
谢义介绍,音视频的转码方式有很多种,gpu的速度快,算力高。但cpu有两个不可替代的优势:超高的灵活性和复用性。cpu的升级成本极低,只需升级一下软件部分即可。更何况在云上申请一个虚拟主机,无论是docker还是container都可以随用随放,十分自由灵活,成本更低。
由于视频前处理的超分部分算力要求非常高,通常需要通过gpu来辅助,但带来的问题是:客户将高要求的ai负载迁移到gpu上,将编码和前处理完全分离。“这就像在一间屋子里解码——发送到另一间屋子进行前处理——再转回来编码。不仅让流程变得冗长,也对运维造成了极大的负担,数据的反复调度也造成了一定的时延增加。cpu全链路智能化编码将视频前处理迁移到cpu上进行,正好解决了这一问题。”谢义说。
ai在给视频编解码带来画质提升的收益时是否会增加成本?
事实上,基于第四代英特尔 至强 可扩展处理器及其内置的ai加速器英特尔 amx,以及英特尔发行版 openvino 软件帮助视频编解码工作者打造全链路智能化编码,就可以让视频编解码ai负载高效运行的同时,降低用户的成本压力。
英特尔 amx 专为ai负载加速而设计,可优化深度学习 (dl) 训练和推理工作负载。借助英特尔 amx,第四代英特尔 至强 可扩展处理器可在优化通用计算和 ai 工作负载间快速转换。同时,由于视频编解码处理的整个pipeline中数据的处理速度并不一致,为了让整个过程的数据顺滑地流动起来,就需要针对ffmpeg的开发工作。而英特尔发行版 openvino 工具套件让用户可以直接进行开发,在大幅降低开发难度和工作量的同时,让ai处理更加流畅。
在一个英特尔合作伙伴的实际案例中,使用了第四代英特尔 至强 可扩展处理器及英特尔 amx优化的ai推理性能,在视频增强和目标检测这两个场景下,相对上一代平台分别提升了1.86倍和1.95倍。这也证明了用户在cpu上完全可以实现全链路的智能化编码,在ai推理性能提升的同时,大幅降低了部署成本和运维成本。
英特尔至强产品线软件架构师谢义表示,英特尔已向全球交付了超过8500万颗英特尔 至强 可扩展处理器,支持着全世界的数据中心,可以说至强服务器是数据中心的基石。第四代英特尔 至强 可扩展处理器一个重要的革新就是内置了数个硬件加速器,用于不同应用场景的性能加速,使cpu性能更为强悍,在包括ai视频编解码等领域可以替代gpu的工作。
助力视频开发者以更高性能
和低成本拥抱aigc时代
在高质量编码领域,目前cpu仍是主力,而ai的高算力仍需额外的gpu卡来承担。基于第四代英特尔 至强 可扩展处理器打造的全链路智能化编码,以及英特尔拥有的全栈ai软件生态和丰富的工具链,可以顺利协助视频开发者构建高性能、低成本的编码方案。
ai应用的普及,技术的发展仍需依赖底层技术突破。除内置诸多加速器的第四代至强 外,英特尔的habana gaudi2, gpu、fpga等多种算力资源和完整软硬件解决方案,将为aigc时代铸就更坚实的算力基石。
罗技GPRO职业电竞键鼠套装评测 无愧职业电竞外设名号
BEV和Occupancy自动驾驶的作用
中国铁塔将支出300亿资金来满足运营商在4G以及5G试点等项目的需要
智能加速 算力先行 | 坤前计算机闪耀安博会
如何利用I/O设备和PLD芯片实现数字日历的设计?
LiveVideoStackCon2023音视频技术大会上海站,英特尔®AMX带来全链路智能化编码新路径!
特斯拉有望在2022年推出20万元内的电动汽车
深度学习框架大PK
快速图解Zigbee入门指南,选择最适多协议设计方案
iphone7出现了黑屏应该如何解决
黑鲨游戏手机 市场上最便宜的骁龙845手机
采用机顶盒技术的Blue Talk视频通话实现
内存和固态的颗粒产能进入了供大于求的阶段 价格还会进一步下滑
苹果iOS 16正式版推送,采用率已超iOS 15
松下-丰田汽车电池合资企业选择 Anaqua管理其知识产权和创新
MEC是发挥运营商网络资源优势,构建差异化云网融合体系的关键
2018人工智能与机器人产业生态高峰论坛暨X加速计划开营圆满举办
共享单车车锁气密性防水检测的案例
单片机STCl2C2052AD的比例遥控系统
六大镜头厂积极扩产,镜头市场需求高涨