骁龙和Qualcomm 品牌产品是 Qualcomm Technologies, Inc.和/或其子公司的产品。
视频会议技术的进步使用户能够跨地域、跨时区甚至在大流行病时期进行协作。但是，只有当每个与会者都能像亲临会议现场一样，都能听到彼此的声音，这样的体验才算得上出色。现有的一般技术往往做不到这种身临其境的体验，背景噪音的干扰或摄像头可视范围有限等问题让与会者感到会议节奏不连贯，缺乏人情味。
Qualcomm Technologies 与台湾 AmTRAN Technology Co.合作，通过构建基于 Qualcomm 视频协作平台的尖端视频协作参考设计，着手改变上述状况。该协作平台搭载了 Qualcomm QCS8250 应用处理器。
本文将详细介绍QCS8250 是如何在上述参考设计中发挥作用的。
重现愉快的视频会议体验
由于需要更多的视频和音频捕获，线上会议参与者的体验往往不会太令人愉快。例如，捕捉面部表情和声音细微差别等行为，以便使会议呈现出“自然”的氛围。
因此，我们与AmTRAN 合作，向业界展示视频会议可以做得更好。合作成果：Qualcomm 视频协作平台和参考设计，展示了 QCS8250 为计算密集型摄像头和边缘 AI 应用提供支持的能力。
该平台在Android 上运行，使用一系列外围设备，结合机器学习 (ML) 算法，实时提供增强的会议视频制作，效果可媲美导演录制。有了参考设计，开发者可以看到 QCS8250 的高级功能是如何工作的，并且这是一个现成的平台，可以用来评估和快速开发视频会议设备。
要实现上述成果，需要一系列视频协作AI 功能，包括群组取景、说话人跟踪和基于 AI 的回声消除噪声抑制 (ECNS)。
而实现上述功能背后的功臣就是板载 Qualcomm Hexagon DSP AI 加速器，该加速器运行设备的视频导向器，利用三只摄像头（超广角、广角和长焦）跟踪房间内的人员。这三只摄像头可以完全覆盖会议室中的每一个人员，甚至是那些离摄像头较远的人员。参考设计可以自动放大或缩小显示与会人员，并裁剪掉无人入座的区域。然后，裁剪和缩放（也称为群组取景）功能将视频流集中到与会人员身上，还可以调整跟踪速度和缩放等设置。
左：参考设计中包含的各种输出；
右：实现丰富视频捕获的三摄像头设置。
三个4K 超高清 HDMI 视频输出，呈现的内容非常清晰，每个输出都能够显示不同的内容，例如主发言人的视图、演示内容以及所有与会者的画廊视图。
在音频方面，“发言人取景”功能可以在有人说话时将镜头拉近，放大显示发言人。多个麦克风协同工作，检测人员相对于摄像头的位置，使用板载算法确定音频的到达方向。发言人停止讲话时，板载 AI 将自动缩小视图显示，以捕获所有参与者的最佳视图。其他 ML 音频处理功能包括背景噪声抑制和回声消除，在会议另一端的人员也可以清楚听到会议室中每个人的声音。
从外观上看，外壳是制作精良的视频协作条栏，可以安装在墙上或放置在会议桌的一个角落。在内部，QCS8250 安装在系统级模块上，如果开发者希望使用不同的应用处理器，可以轻松更换。
其他注意事项和用例
除技术细节外，开发者还应考虑获得 Microsoft Teams 和 Zoom 等统一通信提供商的认证。为创建最佳产品，开发者应尽量获得高于标准级别认证的KPI。参考设计已经完成了资格预测试，有助于开发者更快提交设备进行认证。
不过，归根结底都与平台能够解锁的可能性和机会有关。参考设计中演示的技术也可以应用于包括从企业到消费行业的场景。例如：
为电视添加视频聊天功能
使用多个摄像头提供360 度安防视图
将摄像头重定向到突发噪音源
评估远程瑜伽学员的姿势
展望未来
该平台和参考设计为OEM 厂商打了良好的基础，借助其主板级支持包，OEM 厂商可以使产品脱颖而出并加快上市时间。此外，其基础技术还可以适用于混合式会议，让每一个人（远程或现场）都能更多地参与到视频会议中。客户和 ISV 可以围绕参考设计，构建高附加值的产品。
我们预计，随着视频会议技术的发展，远程和本地体验将会出现融合。我们希望您能利用Qualcomm 视频协作参考设计，创造出更好的用户体验。
准备好开始了吗？
您也可以浏览以下资源，了解更多的信息：
AmTRAN 参考设计（请参阅用户手册中的“支持”选项卡）。
Qualcomm 视频协作平台、QCS8250 和 Qualcomm Hexagon 是 Qualcomm Technologies, Inc.和/或其子公司的产品。
