Skip to main content

Grove Vision AI v2 在 SenseCraft AI 平台上的工作空间

入门指南​

连接 Grove-Vision AI v2​

  1. 使用 CSI 连接线将 Grove - Vision AI V2 连接到摄像头。

  1. 使用 USB 将 Grove - Vision AI V2 连接到您的电脑，并选择 USB 单一/串行调试单元进行连接。
note

请使用 Chrome、Opera 或 Edge 浏览器将 AI 模型部署到 XIAO ESP32S3 Sense 和 Grove Vision AI v2。

  1. 连接设备后，系统将读取设备信息、模型信息，并运行模型进行推理。用户可以调整 Confidence 和 IoU 设置，以微调模型推理的准确性。
  • Confidence：Confidence 指模型对其预测的确定性或概率水平。
  • IoU：IoU 用于评估预测边界框与真实边界框的准确性。

替换 AI 模型​

如果需要替换设备当前运行的模型，SenseCraft AI 平台提供了两种方式：

  1. 在 SenseCraft AI 平台上选择公开的模型或用户账户下的模型进行替换。

  1. 直接上传模型进行替换。
  • 模型名称：输入名称
  • 模型文件：上传 tflite 格式的模型
  • ID 对象：模型识别的类别

配置​

如果需要将设备的推理结果推送到您自己的 MQTT 服务或 SenseCraft 数据平台，请配置 Wi-Fi 和 MQTT。接下来，我们将以 SenseCraft 数据平台为例。

  1. 输入有效的 2.4G Wi-Fi。
  2. 访问 SenseCraft 数据平台 并登录。
note

您可以使用同一个账户登录 SenseCraft AI 和 SenseCraft 数据平台。

  1. 进入开发套件页面并点击“创建开发套件”按钮。
  2. 输入设备名称并选择“Grove-Vision AI v2”作为设备类型。

  1. 创建设备后，点击“连接”，然后依次复制并粘贴 Host、Port、clientId、Username 和 Password。

  1. 完成表单后，点击保存按钮。一旦设备成功应用更改，进入处理页面。您将看到 IP 地址和服务状态：MQTT 已连接。

  1. 现在您可以返回 SenseCraft 数据平台的开发套件页面。点击设备的 EUI 进入设备详情页面，您将能够看到推理结果。

输出​

设置条件，当检测到的目标满足标准时，XIAO ESP32S3 上的黄色 LED 将亮起。

示例：如果设备检测到人脸且置信度大于 43，则点亮设备的黄色 LED。

训练​

SenseCraft AI 集成了 YoLo-World，可以根据用户输入的类别快速生成单类别 AI 模型，并直接部署到 Grove-Vision AI v2 设备。

快速生成​

  1. 输入类别，点击快速生成按钮，等待模型生成。

  1. 模型生成后，您可以选择模型并点击“部署到设备”按钮，将生成的模型刷写到设备上。

  1. 查看推理结果。

捕获以训练​

快速生成的模型可能准确性不高。您可以点击“捕获以训练”按钮拍摄并收集目标图像，将收集的图像提交到 Yolo-World 进行优化训练。优化后的模型将具有更高的准确性。

  1. 使用 Grove-Vision AI v2 摄像头对准目标，点击捕获按钮收集图像。

  1. 在捕获的图像中选择并确认目标。

  1. 重复步骤 1-2，至少收集 10 张照片用于训练。收集完图像后，点击“训练模型”按钮。

  1. 模型生成后，选择新生成的模型，将其部署到设备，并检查推理结果。

技术支持​

需要帮助解决您的 SenseCAP Indicator 问题？我们随时为您提供协助！

Loading Comments...