AI与场景化时代,视频云架构的技术演进

原创
服务器 数据中心
视频、直播的火爆给中国视频云的发展带来大好机遇。但与此同时,视频云对于云存储、计算、网络带宽、内容分发等基础设施要求较高。

【51CTO.com原创稿件】视频、直播的火爆给中国视频云的发展带来大好机遇。但与此同时,视频云对于云存储、计算、网络带宽、内容分发等基础设施要求较高。特别是视频点播、直播等视频场景的出现产生的高并发需要稳定高效的计算资源以及网络带宽资源;对于视频的播放与观看将产生海量数据,需要视频云提供相应的数据分析功能。

因此,在业务快速发展的背景下,如何对直播、视频流进行智能处理,以更低的带宽成本给用户提供更高清的视频直播流,如何对视频服务器进行分流、减负,合理的进行资源配置,建设强壮、灵活的视频云架构,已经成为视频相关企业、IT服务商最为关心的问题。

[[242260]]

图:《AI与场景化时代,视频云架构的技术演进》研讨活动在京举办

近日,由51CTO联合英特尔举办的《AI与场景化时代,视频云架构的技术演进》主题沙龙活动在北京悦真雅院举行,来自英特尔、爱奇艺、新浪、网易、小米等企业的技术专家齐聚一堂,就AI与场景化时代下,企业视频业务如何应对IT架构的新挑战这一热点话题进行了激烈的讨论。

新技术加速业务创新,推动企业高速发展

当前,新科技正在驱动视频行业变革和创新,无论是传统企业还是互联网企业,都希望能够尽早获取技术红利,以此来加速企业创新,赢得竞争优势,推动业务高速发展。爱奇艺基础架构高级总监余珂在《爱奇艺AI视频云架构实践》的分享中表示,目前,AI在爱奇艺视频中的应用已经非常广泛,涵盖了智能创作、智能生产、智能标注、智能分发、智能播放、智能变现、智能客服等应用场景。

随着AI应用的爆发,需要快速满足业务需求,同时,云、CDN、端等运行环境日趋多样化。此外,还存在缺少统一管控,无法合理分配;资源独占,不够灵活;资源浪费,利用率不高等现状,因此,视频AI应用对基础架构都提出了更大的挑战。对此,爱奇艺构建了一套Jarvis深度学习云平台,包括数据采集、数据标注、算法商店、训练平台、推理平台。

[[242261]]

图:爱奇艺基础架构高级总监余珂主题分享

在产品部署方面,爱奇艺应用了Intel OpenVINO优化,可以兼容主流的机器学习框架,使用CPU以及GPU、VPU、FPGA等intel硬件加速资源,从而快速开发和部署视觉、深度学习推理应用。据介绍,Intel OpenVINO在CPU服务器上可加速视频业务4~20倍。

对于未来,余珂表示,将构建多样性的深度学习资源,包括CPU,GPU,FPGA,ASIC。同时,持续进行资源调度优化,助力生产各环节及AI应用整合。

[[242262]]

图:《AI与场景化时代,视频云架构的技术演进》研讨活动现场

新浪云简资深架构师贾朝藤表示,各家短视频公司都会遇到转码的痛点,对于一款UGC产品来说,在某一时间段视频转码会遇到任务数据的峰值,目前很多公司直接通过调参的方式来解决,但其实可以通过AI来解决各个环节的问题,更加优化转码效率。在转码之后还有分发,也就是CDN。但传统CDN厂商的经验在于长视频,例如爱奇艺、优酷,但是长视频的场景其实与短视频的场景不是特别一致。因此,针对于短视频需要做一些针对性的优化,来推进CDN厂商或者通过自建CDN节点的方式进行优化。

国美在线电子商务有限公司大数据中心副总监杨骥表示,技术架构重构不单单是一个技术问题,同时还是一种业务层面的问题,如何在新老架构之间进行无缝的切换和融合是一个值得思考的问题。在目前电商行业新零售的大背景下,包括线上线下的大量数据,因此要提高的不仅是异构计算的问题,同时也是异构存储的问题。例如在视频方面,用户的行为、消费如何进行存储和计算都是一个非常有挑战性的问题。

面对新技术挑战,IT架构改革势在必行

视频作为互联网行业的代表性应用,始终走在技术的最前沿,因此技术工程师都非常愿意对新技术进行不断尝试,这些百花齐放的技术在给行业带来了良性竞争的同时,也给IT架构带来了严峻的挑战。如何将新技术与IT架构进行完美匹配,真正发挥技术优势,推动业务创新与发展,成为摆在技术工程师面前的首要难题。

[[242263]]

图:各小组话题讨论

北京易车信息科技有限公司高级研发经理杨伟表示,混合云是未来的大趋势,完全的公有云和完全的私有云,都不会满足各种业务未来的发展方向。在网络方面,CDN不仅可以进行精彩资源的分发,还可以做视频流的转码、分发,甚至包括审核,这也是未来的一个发展方向。在硬件方面,在带宽有限的情况下,建议存储和计算放在一起,可以解决流量传输带来的损耗。未来,希望能够有足够的带宽把计算和存储分离开,可以做到分别扩展,互不干扰,更加利于架构的优化。

新浪网技术(中国)有限公司实时流负责人廖博表示,很多互联网企业的视频架构主要是利用Intel的GPU进行视频的编码和解码。在计算架构方面,主要是通过实时流计算结合机器学习的算法,来满足内容推荐、监控和识别。为了满足创新和快速发展的需要,在重构IT架构方面应该更新新一代的服务器,引进多家服务器厂商进行竞争,还可以通过上公有云实现自动扩容。

[[242264]]

图:小组长分享小组讨论精彩内容

58同城技术经理胡显波表示,对于新技术的引进,我们需要对新技术的稳定性和成熟度进行重点的考量。因为引进新技术,对于公司原有的业务模式、产品架构模式都会产生一些影响。我们更多的考虑云计算等一些新技术,同时需要更专业的硬件和软件服务提供商来给我们提供服务,保障公司业务的稳定性。目前对于云计算,我们更倾向于混合云的模式,例如线上云和线下云,更适用于公司大部分的业务场景。但在数据同步、云的切换等方面,混合云的管理还是当前的一个难点。

经讨论大家一致认为,传统计算、网络、存储的IT架构,已经难以满足业务高速发展的需求,视频相关企业要想借助新技术推动创新与发展,IT架构改革势在必行。

软硬件结合,让IT架构做到敏捷高效

新技术不仅对计算、存储、网络等硬件设备提出了更高的要求,而且对软件的要求也越来越高。企业要想保持视频业务快速增长的势头,必须重新调整IT架构或者构建更加智慧化的数据中心,以确保每个系统上运行更多不同类型的工作负载,为企业充分利用新技术,推动业务创新和持续高速发展,奠定扎实的基础。

在推动新技术的落地应用上,英特尔提供了强大的软硬件产品,以帮助视频相关企业改造、升级IT架构,从而满足业务高速增长下的IT架构对新技术的需求。 英特尔目前的数据中心产品组合比以往更为广泛。在私有云和公有云环境,采用英特尔技术的平台组件可帮助确保数据安全,以及提供高性能。在验证特性时,英特尔会确保所有组件高效协同,因为这是客户所需。

在硬件方面,英特尔新至强可扩展处理器是近十年来数据中心领域最大的平台级提升,为“混合云”战略而定制。在性能方面大幅提升,是上一代产品的1.65倍,可以运行4.28倍的虚拟机,降低65%的TCO,云方案的安全可靠性提升了2.42倍。

其采用了全新的内核微架构、核内互联和内存控制器,专门针对计算、网络、存储和虚似化等应用进行优化,为下一代云基础设施提供了硬件基础,包括数据分析、人工智能、自动驾驶、高性能计算和网络转型在内的各类应用都将可以从至强可扩展当中受益。

在软件方面,英特尔软件工具可以帮助开发人员实现加速,创新与差异化。Intel® Media Server Studio & Intel® Media SDK可以实现高速视频编码/解码以及图像处理、压缩;Intel® Computer Vision SDK 通过加入计算视觉解决方案,实现整合深度学习推理;Intel® SDK for OpenCL™ Applications & Intel® FPGA for OpenCL可以实现定制化解决方案,优化计算,多样化编程;Intel® System Studio则可以进一步提升性能与功效。

[[242265]]

图:英特尔数据中心技术架构师陆扬主题分享

英特尔数据中心技术架构师陆扬在《Intel助力视频云架构的技术演进》主题分享中表示,通过英特尔软件与硬件可帮助企业视频业务实现五大优势:通过硬件加速的编解码器,加速器和英特尔处理器中的集成图形来加速媒体与计算视觉通道,并从灵活性与互操作性中受益;保持竞争力,加速过渡到实时 4K 和高效 HEVC;使用企业级的编解码器实现快速上线;视觉解决方案集成计算视觉与深度学习推理;减少开发时间与成本,端口代码可跨不同平台与操作系统。因此,英特尔最新的云技术可以更好地帮助企业来部署云基础设施,以降低拥有成本,提高经济效益。

总结

当前,面对日趋复杂且多样的新技术,走在行业前沿的互联网企业必须积极的站出来,勇于探索和尝试视频业务的创新模式,只有这样才能加速技术的落地,推动企业的创新与发展。而在积极探索和尝试的过程中,IT架构势必面临诸多的挑战,如何用最低的成本、最短的时间来改造IT架构,重构数据中心,积极拥抱云无疑是最好的选择。本次研讨会中,视频的技术大牛们不止一次提到过云计算的优势,充分说明大家对云平台的认可。

无论是私有云、公有云,还是混合云,英特尔已经为企业视频业务提供了非常成熟的技术解决方案。借助英特尔提供软硬件产品优势,企业能够加快云平台的建设部署,积极应对新技术应用带来的IT架构挑战,加速视频业务创新步伐,以保证在未来长期的市场竞争环境中持续获得优势,推动企业的高速、健康发展。

【51CTO原创稿件,合作站点转载请注明原文作者和出处为51CTO.com】

责任编辑:Barry 来源: 51CTO
相关推荐

2016-12-05 09:42:23

视频直播网易视频云

2016-12-04 10:00:16

直播架构

2020-10-21 10:04:56

云原生应用架构

2021-07-13 17:00:11

阿里云视频云AI

2016-12-02 11:42:58

网易视频云直播

2016-09-22 14:24:52

IBM

2017-12-08 20:06:47

华为

2016-12-05 11:27:04

直播

2013-10-29 10:19:36

虚拟化云发展

2018-11-02 17:19:16

华为云

2020-08-28 08:29:40

云原生微服务编程

2019-11-25 09:00:58

云智能云计算人工智能

2023-12-07 14:20:05

2023-11-30 16:42:21

2009-11-26 17:21:38

智能弹性架构技术

2012-06-20 18:25:19

智能化隐忧

2016-07-01 15:36:18

云计算

2021-08-31 16:17:50

数字化

2016-12-12 10:17:50

网易视频云互动直播

2018-04-25 20:00:35

华为
点赞
收藏

51CTO技术栈公众号