无论你是想在家工作、学习还是娱乐，智能屏幕都将是你的最佳选择

2022年9月02日

Sharmin Farah著

简单地说，智能屏幕是一种由电池供电的触摸屏设备，它可以连接、共享和与其他设备交互。它也被称为无线显示器，用于很少或不需要键盘的活动。这是一种相对低成本和简单的方式，可以连接web应用程序、视频会议和共享内置Wi-Fi连接的工作空间。

智能屏幕已经成为消费者、工业和企业客户端计算的一个令人兴奋的创新平台。在COVID - 19大流行期间，人们开始在家工作，它们开始受到欢迎。正如在Synaptics最近的文章在美国，通过结合人工智能(AI)、无线连接、触摸、声音和视觉传感、可扩展和安全处理，以及先进的显示驱动程序和算法，智能屏幕能够提供完全沉浸式的、上下文感知的用户体验，将它们变成一个多功能控制点，从它可以安全地与各种设备进行交互。本文通过解释在Synaptics的VS680多媒体SoC上运行的Visidon软件如何增强智能屏幕功能并支持各种用例，深入研究硬件和软件是如何发展并协同工作以实现下一代智能显示器的。

尽管定义可能有所不同，但智能显示器作为住宅、商业和工业应用的中心枢纽的崛起已经得到了充分的证明。华体会最新下载网站例如，Research and Markets预计，到2027年，该市场将达到161.6亿美元，复合增长率为22.56%，而2021年为47.9亿美元。互联网用户的增加、智能镜子的创新功能、对人工智能驱动和物联网智能家电的需求增加，可能会对市场增长产生积极影响。

然而，为了充分发挥智能显示器的潜力，底层硬件必须达到关键的性能、健壮的功能、安全、成本和效率要求，而算法必须高效、直观、无缝，并能够充分利用硬件的功能。这需要密切的合作和先进的、易于使用的开发工具。

Synaptics和Visidon正在合作，通过Synaptics的VS680多媒体SoC(硬件)和Visidon的算法(软件)，提供全面的解决方案，增强用户的智能显示体验。本文深入研究了Visidon的两个算法组，如人脸分析和深度计算，它们被移植到Synaptics的VS680上并为其优化，以解决不同的用例。

Visidon人脸分析算法包括人脸检测、跟踪和识别、年龄、性别和微笑分析以及眼镜和口罩检测。这些算法支持智能屏幕访问控制和内容个性化。例如，人脸识别在整理照片、保护笔记本电脑和手机等设备以及帮助盲人和低视力社区方面很有用。

对于智能屏幕视频会议和通信增强，Visidon算法进行深度计算和肖像分割，并提供各种娱乐过滤器。其中一个滤镜是bokeh，它通过在前景上提供清晰和锐利的边缘和背景的逐渐模糊来帮助聚焦在前景对象上。此外，Visidon的素描、黑白、复古或卡通效果可以进一步丰富视频会议，使交流更加有趣。

除了视频会议增强功能外，深度估计算法还用于增强现实应用程序，如辅助运动、虚拟衣橱和交互式游戏。华体会最新下载网站

Visidon人脸分析和深度计算算法是由VS680的NPU、CPU和GPU上实现的不同组件构建的(图1)。

Visidon的面部分析算法、面部检测和跟踪在CPU上运行，而年龄检测、性别、微笑和眼镜检测在NPU上运行。值得注意的是，虽然一些NPU在SoC中被“附加”到CPU和GPU上，但VS680的NPU和AI管道是无缝嵌入的，因此它们在一个受信任的执行环境中运行，这对安全和隐私至关重要(图2)。

对于增强的视频会议，Visidon提供深度估计和人像分割(图3)，以分离帧中的主要对象并取代背景。这些网络运行在NPU上。此外，人脸检测选择帧中的焦点和深度图来实现散景效果。掩码细化提高了深度图和分割掩码的精度。最后，效果渲染创建背景模糊、背景替换和有趣的效果。这些网络运行在CPU和GPU上。Visidon提供单眼和立体相机的深度估计。Visidon bokeh，与基于分割的对应版本相比，提供了更自然的外观，更少的物体切割和可见错误。它还具有高稳定性，没有闪烁的身体部位。

图3:Visidon的深度估计、分割和散焦分离了帧中的主要对象，并替换了背景(左上-输入，右上-逐渐模糊的散焦)

在深度感知应用中，深度估计算法允许华体会最新下载网站图像中物体的真实深度和距离计算，而分割可以用于从图像上下文中提取物体和主题。例如，如果一个人坐在椅子上，地面和椅子与相机的距离与人相同，分割可以从语义上区分什么是人，什么是椅子，什么是地面。

Synaptics的VS680由其SyNAP工具包支持，该工具包使客户能够优化ML/AI模型，以充分利用VS680的功能(图4)。这些模型包括视频、视觉和音频AI。使用VS680很容易，不需要使用任何其他指定的平台工具，这在使用特殊硬件时通常是一个缺点。

Synaptics和Visidon将在2022年IBC展会上展示他们的解决方案(https://show.ibc.org/)于9月9日至12日在阿姆斯特丹举行。（科幻小说）

本博客最初发表于Display Daily
Sharmin Farah是Visidon的市场经理，她的任务是通过不同的细分市场来发展公司在视频增强领域的品牌。她对数字营销和传播充满热情和专业知识，同时在项目管理、品牌、公共关系和研发方面也有经验。