莱迪思sensAI – 智能和感知AI解决方案为新一代PC代来哪些全新的体验呢?
莱迪思亚太区资深市场开发经理Karl Lin介绍,下一代PC需具有智能和感知、强大的协作以及纤薄的外形。莱迪思为物联网边缘设备,包括下一代PC专门打造了sensAI 4.1方案。可实现用户检测功能,当用户接近或离开设备时会自动启动或关闭客户端设备;注意力追踪功能,可以监测用户的注意力是否在屏幕上,当注意力移开时降低设备的屏幕亮度,节约电量,与使用CPU来驱动AI应用的设备相比可延长28%电池寿命;而面部取景功能可在视频会议应用中提升视频体验;旁边者检测功能可检测站在设备后面潜在的窥视者,模糊屏幕以保障数据隐私。
这些功能的实现是基于莱迪思sensAI 4.1方案,众所周知莱迪思是低功耗FPGA领先厂商,那FPGA是要打入PC市场吗?答案是“YES”,FPGA不仅仅在PC上,广极到网络边缘AI很多的设备上低功耗FPGA都有明显的优势。边缘设备对功耗以及尺寸都有着敏感的要求,莱迪思主打低功耗小尺寸,其网络边缘的AI可以实现1 毫瓦 - 1 瓦的功耗 ,在功耗上也不输ASIC。重要的是FPGA本身具有灵活性,可以做灵活的计算资源,包括预处理和后处理ISP、FFT和滤波等数据。同时在性能拓展方面FPGA有明显的优势。在安全方面莱迪思可提供安全芯片,保证AI设备的安全性。值得一提的是AI技术不断创新,算法具有多变性,那FPGA的硬件可编辑特点刚好解决这一问题,同时降低成本。
sensAI 4.1特点
莱迪思本次发布的sensAI 4.1 硬件方面支持今年发布的CertusPro™-NX,该器件具备大容量,计算能力和功率更高,提供声音和视觉机器学习板;同时提供CNN Plus加速器;在软件和工具方面提供sensAI Studio 和神精网络编译器。同时针对开发板,还提供三个参考设计,人员侦测、注意力追踪、目标分类。
硬件优化的设计方法:如下图在培训方面,经过标准训练后,将模型发给莱迪思提供的神经网络编译器,编译相对应的可执行指令,这些指令由莱迪思FPGA调取使用。另一方面,利用莱迪思软件设计AI方案,产生FPGA位流,烧录进FPGA,两方面结合后产生AI体验效果。
下图是莱迪思软件优化的设计方法,利用莱迪思PROPEL软件,便于初学者调用基本指令进行控制,能够进行类似C代码的控制,容易上手。左侧是莱迪思开发AI的引擎架构,包括ML,视觉收取,软核的控制等。
针对培训环境应用场景、软件更新过快的问题,莱迪思推出sensAI Studio,是一款基于GUI的工具,拥有AI模型库,经过配置和训练可适用于各类主流应用场景。sensAI Studio现支持AutoML功能,能根据应用和数据集目标来创建机器学习模块。Karl解释说,sensAI Studio将莱迪思提供的网络预安装在一个容器中,客户只需将这个封好的容器直接移植到电脑上,便可在这个容器上执行相应的培训,可以节省很多的精力和时间。
Karl也提到,为能够使得莱迪思AI方案真正的在PC上实现,是需要建立建全生态环境的,包括和OEM、以及其它芯片如传感器,AI ASIC等方面合作,另外还有操作系统方面的配合。莱迪思已经与相关伙伴展开合作,制定莱迪思客户端计算AI体验的发展路线图。
不仅是PC设备,sensAI 4.1版本在性能和准确度方面的提升有助于拓展其它目标应用,包括自动化工业系统中使用的高精度目标检测和瑕疵检测等。