日期
04/12
2023
咨询
  • QQ扫一扫

  • Vision小助手
    (CMVU)

探秘空间AI平台:轻松使用深度AI相机构建应用,深入应用OpenCV AI套件
收藏
2023-04-12 14:19:40来源: 中国机器视觉网

什么是HK DepthAI?

让虹科带你一同领略AI深度平台的强大功能。HK DepthAI是一个空间AI平台,借助它结合相机可以让机器人、计算机等像人类一样感知世界,认识他们所看到的对象或特征是什么,以及知道它们自己在物理世界中的位置。它集五个关键功能为一体:人工智能 (AI)、计算机视觉 (CV)、深度感知、高性能(高分辨率和高帧率)和嵌入式(小型低功耗解决方案)。

通过调用HK DepthAI API ,您可以深入应用OpenCV AI套件,该套件可以让您在相机节点、图形系统中使用神经推理 (AI)、深度处理和计算机视觉 (CV) 功能。并且可以构建 AI、深度和 CV 的复杂组合,如下所示:

微信图片_20230412142331.png

使用HK DepthAI API,您可以了解如何同时执行多个神经模型和 CV 功能以实现所需的功能:比如,从远处读取手势。标准手掌探测器只能检测最远 2 米左右的手部动作。在上面的示例中,用户距离相机 5 米依然可以精确检测手势。那么他是怎么做到的呢?

他使用HK DepthAI API构建了一系列神经模型和计算机视觉功能,首先找到人的区域,然后找到人的姿势,接着将手部区域输入手掌检测器模型。接下来,它将检测到的手掌图像送到手部姿势模型中,该模型根据手部姿势的关键点,就可以识别对应的手势动作。此 API 非常适合想要全面和深入开发的资深程序员,以便他可以完成各种复杂的应用,HK DepthAI API可以满足他们的需求。

但是,随着技术不断发展,许多步骤和配置,只是为了让某些东西运行。你可能不需要关心(至少一开始上手是这样)。这就是HK DepthAI SDK的用武之地,它依然可以让你轻松快捷地跑通整个AI应用。

什么是HK DepthAI SDK?

HK DepthAI SDK提供了常用设置函数和高级功能函数,使您能够更快地实现应用。它将大量 API 调用打包到简单易用的函数方法中,从而更轻松地执行常见任务,例如设置相机、运行神经网络、获取深度输出等。

HK DepthAI SDK运行在HK DepthAI API之上 - 两者都是开源的。因此,您可以从 H K DepthAI SDK 开始,然后查看给定的SDK管理器中有哪些 API 调用,用来构建您自己的自定义任务。下面是一个示例,仅需短短几行代码,您就可以显示HK OAK-D-Lite型号相机的彩色视频流:

微信图片_20230412142349.png

只需几乎同样少的代码量,您就可以在HK OAK-D-Lite相机上启动并运行实时 AI:

微信图片_20230412142351.png

因此,纵使你不是一个专业精通编程的开发人员,您也可以轻松上手!自己在代码中尝试实现一些复杂应用。不想编码?虹科也提供图形化编程,通过拼接代码方块,实现无代码编程。如下图:

微信图片_20230412142353.png

使用深度AI相机构建应用的方法

虹科提供 3 种使用HK OAK-D-Lite 相机构建应用的方法:图形化编程:HK OAK-D-Lite相机的无代码编程。HK DepthAI SDK:HK OAK-D-Lite相机的低代码量编程。HK DepthAI API:可全面深度底层使用及访问HK OAK-D-Lite相机的所有功能。虹科还在不断添加更多的应用到HK DepthAI SDK 资源库中,里面包含了大量的客户应用开源代码,现在依然在不断更新中。

虹科深度AI相机HK OAK-D Lite,高性能和经济性概念结合

微信图片_20230412142356.png

· 主要特点

4 TOPS算力(1.4 TOPS用于人工智能)。运行任何AI模型,甚至是自定义架构/构建的模型。编码: H.264、H.265、MJPEG-4K/30FPS、1080P/60FPS。计算机视觉:扭曲/去毛刺、调整大小、裁剪、边缘检测、特征跟踪。带滤波的120 FPS立体深度感知。目标跟踪:2D和3D跟踪。用于电源和通信的USB-C连接器,支持USB2和USB3协议(5Gbps/10Gbps)。BMI270 IMU,6轴传感器,结合加速度计和陀螺仪。尺寸: 91x28x17.5mm。重量:61g。

HK OAK-D Lite有两种版本:固定焦距和自动对焦。这些版本仅在中心彩色摄像头的配置上有所不同。固定焦距版本具有机械固定的镜头,而自动聚焦具有动态控制镜头位置的电磁铁。这两种版本都可以清楚地看到50厘米及以上的物体。自动对焦:建议在距离设备10厘米到50厘米的近距离物体上使用相机。也可以使用DepthAI API将它们手动设置为特定的焦点位置。固定焦距:建议将摄像头用于重型振动应用,如无人机、割草机或车辆。