导 读
“机器学习作为一种快速发展的技术,正在激发 pro av 与广播领域的全新使用模式。”
——赛灵思 pro av 与广播业务总监 ramesh iyer
根据研究机构数据,2020年8k面板出货量将从去年的24万片激增至110万,增幅高达358%。随着8k技术瓶颈突破以及产业链趋于成熟,8k产品市场有望迎来快速增长。事实也印证了这一点:2020 年庚子年央视新春联欢晚会首次采用 5g + 8k 技术实现拍摄与制作,拉斯维加斯 ces 展上8k 技术和产品也几乎无处不在。
然而,巧妇难为无米之炊。如果只有 8k 产品而缺乏 8k 画质的内容,8k 依然无法真正实现。
赛灵思作为自适应和智能计算的全球领先企业,去年率先引入hdmi 2.1 ip子系统,使各种搭载赛灵思器件的专业音视频(pro av)设备能够发送、接收和处理高达 8k(7680 x 4320 像素)的超高清(uhd)视频。今年欧洲集成系统展(ise)上,赛灵思再次面向pro av和广播市场的相关器件推出一系列全新高级机器学习(ml)功能,并演示了业界首个基于7nm versal™ 器件的可编程 hdmi 2.1 实现方案。
这些颇具针对性的高度自适应解决方案,将有效帮助客户降低成本、适应未来,同时适应全新的使用模式以及不断发展演进的产业标准。
机器学习作为一种快速发展的技术,正在激发 pro av 与广播领域的全新使用模式。在赛灵思自适应平台中添加 ml 功能,实现了高度集成的 av 处理器,为 8k 视频、ip 音视频和压缩功能提供了业经验证的支持。现在通过增添多种高级功能,有助于开展商业化分析、提高工作流效率和增强可用性。最终,这些集成ml 功能将帮助企业加速创新、实现自身差异化,并加快产品上市进程。
—— 赛灵思 pro av 与广播业务总监 ramesh iyer
面向 ai 边缘处理的高级ml功能
面向赛灵思 pro av 和广播平台全新推出的 ml 功能包括感兴趣区域编码(region-of-interest encoding)、智能数字标牌(intelligent digital signage)、自动对象跟踪(automatic object tracking)和窗口剪切(window cropping)以及语音识别(speech recognition)。现在,客户能够充分运用赛灵思器件上的这些 ml 功能,包括已经高度集成的 zynq® ultrascale+™ mpsoc 平台,用于实现 ai 边缘处理。将实时音视频处理、av 连接接口、编解码器、ip 联网、cpu 和 gpu 集成在可扩展的自适应单芯片解决方案中,能为用户显著节省空间、功耗和成本。
pro av 市场客户能够将这些全新的 ml 功能用于多种应用和工作负载。主要包括:
感兴趣区域编码 —— 借助 ml 和 zynq ultrascale+ mpsoc 集成型 h.264/h.265 编解码器,保持这些区域的高质量视频画质、加大背景压缩幅度,从而更好地检测人脸和特征。这种方法能降低总比特率,大幅节省实时视频流的成本。
智能数字标牌 —— 使用 ml 模型检测性别、年龄和手势,在数字标牌上提供针对性的交互广告。这种方法能为广告商带来更高的投资回报率以及可获利的行为指标。
自动对象跟踪与窗口裁剪 —— 使用 ml 功能,从单个 4k 摄像头输出多个高清窗口。这项功能尤其适用于在实况播报和控制室中提供画面切换内容。
语音识别 —— 根据语音自动输出文本,理想适用于会议记录内容自动转录以及会议与协作中的语言翻译。
首款在 7nm 器件上实现的的 hdmi 2.1 方案
在 ise 2020 上,赛灵思演示了业界首款基于赛灵思 7nm versal™ 器件的可编程 hdmi 2.1 实现方案。该方案基于赛灵思首款自适应计算加速平台( acap )构建。acap是一款具有变革意义的全新异构计算器件,其功能远超常规的 cpu、gpu 和 fpga。
hdmi 2.1 数据速率高达 48gbps,支持 8k60 和 4k120 等一系列更高的视频分辨率和帧率,从而帮助 led 画面墙、大幅面显示屏、数字标牌以及运动赛事实况转播等需要高速视频功能的应用提供更加身临其境的体验。基于versal acap 的 hdmi 2.1 实现方案专门支持这项标准,可以帮助客户发送、接收和处理高达 8k(7680 x 4320 像素)的超高分辨率( uhd )视频。
7nm versal acap 在软件可编程芯片架构下提供了可扩展的自适应智能化引擎,将嵌入式软件、多通道 av 处理流水线和 ai 推断紧密结合。此外,还将实时视频处理、av 连接接口、编解码器、ip 联网、cpu、gpu和其他功能集成在单芯片解决方案中,也能为客户节省空间、功耗和成本。
versal ai core 系列 vck190 评估套件
vck190 是首款 versal™ ai core 系列评估套件,可帮助设计者使用 ai 和 dsp 引擎开发解决方案,与当前服务器级 cpu 相比,这些解决方案可实现 100 倍以上的计算性能。
vck190 套件包含 vc1902 versal ai core 系列 acap,凭借广泛的连接选项和标准化开发流程,可为云、网络及边缘应用提供产品组合中最佳的 ai 推断及信号处理吞吐量。
主要性能和优势
可支持高吞吐量人工智能推断及信号处理的多市场平台
5g 无线电与波束成形
电缆接入(头端)
无线测试与测量
汽车/adas 原型设计
广泛的连接选项,可实现快速应用开发
ddr4 和 lpddr4 内存接口
sfp28 及 qsfp28 光学接口和适用于网络的 rj-45 以太网端口
面向高计算性能市场的 pcie® gen 接口
面向视频处理应用的 hdmi
fmc 扩展连接器,支持多种可选的插件卡,包括相机传感器和显示器
(转载)
以上是网络信息转载,信息真实性自行斟酌。










