“AI+”大咖说丨灵活架构+积木式堆叠研发特色,“玲珑”V560/V760 VPU IP为各类AI应用提供视频技术支撑

来源:安谋科技 #安谋科技#
2969

AI时代,海量视频数据奔涌而来,应用场景日趋复杂,究竟何种VPU架构才能支撑起这样的视频处理需求?

在“玲珑”V560/V760 VPU IP发布会上,安谋科技VPU研发总监黄鑫博士将视频应用比作复杂“路况”,VPU硬件像汽车“发动机”,软件与固件像可持续升级的“智驾辅助系统”,唯有从底层架构坚持自研创新、软硬协同,才能适配多样化的视频处理需求。代号峨眉的“玲珑”VPU新品给出了答案,该IP构建了软件、固件、硬件深度协同的三层一体化架构,以“八面玲珑”的灵活与稳健,游刃有余地应对多元场景下的视频编解码需求。

黄博士详解了峨眉架构的设计精髓,如何将纸面上的技术理念与能力,转化为流畅、高效的产品体验:软硬结合、灵活切换:软件层负责动态分配任务与调度资源,固件层支持不同编解码协议,精细化处理编码码率控制、解码容错、任务调度,以及多核间的协调,硬件层则专注底层加速,推进PPA的极致平衡。三层各司其职又环环相扣,让多任务可灵活切换;条带并行、异步解耦:视频处理以“条带”为基本单元,可实现“边采边编、边收边解”,从而提升整体算力的利用效率,大幅降低延时。异步解耦架构让像素域与码流域引擎独立运行,任务完成即切换,互不阻塞,从而轻松支撑更高码率以及多任务场景下的切换效率。

在研发设计上,黄鑫指出峨眉极具巧思地采用“积木式堆叠技术”,即将编码质量、数据容错、低延时解决方案、解码性能等核心技术模块化,客户可在统一的架构框架下按需配置,拼搭出最契合自身业务的视频处理方案。

灵活创新的架构催生了硬核技术突破,黄博士着重介绍了峨眉的多项核心技术亮点:

内容感知编码(CAE)技术:该技术在编码器中集成轻量化AI,可实现“图像语义分析-像素级预处理-码率动态分配”全链路智能优化,从而大幅降低码率、有效提升编码质量,实现画质、存储与带宽之间的更优平衡;

低延时:采用条带级编解码控制技术,实现视频数据“即采即处理”,同时条带间信息可多核同步,配合多核并行处理性能线性叠加,真正做到低延时而不牺牲编码质量,快且清晰;

高鲁棒性:在码流域构筑了极强的容错纠错机制,可处理多种类型的错误,保证稳定解码,流畅输出视频。同时,固件可升级方案让容错能力持续进化,无需修改芯片设计即可解决罕见错误场景,降低客户长期维护成本。

“架构是根,技术是叶,根深才能叶茂。”,黄鑫表示,安谋科技“玲珑”VPU AI编码技术会持续升级与拓展,在全新的AI VPU训练框架基础上,实现从“局部优化”到“端到端全局优化”、从提升“主观视觉”到“赋能AI万象”的跨越,为各类AI应用提供更坚实的视频技术支撑,助力客户在AI时代赢得先机。

戳下方视频看黄鑫博士如何“大咖说”

责编: 爱集微
来源:安谋科技 #安谋科技#
THE END
关闭
加载

PDF 加载中...