Pular para o conteúdo principal

Gravando modelos de IA no SenseCAP Watcher

Visão geral​

Agradecimentos especiais ao XiaoZhi AI Chatbot por suas contribuições de código aberto que tornaram este projeto possível.

Este guia se concentra em como gravar no SenseCAP Watcher o firmware de Conversação Acionada por Reconhecimento Visual e como substituir ou atualizar o modelo de IA no dispositivo. Ele é destinado como um guia prático e instrucional para essas operações.

Para uma introdução completa aos recursos, aplicações e casos de uso do Watcher, consulte: SenseCAP Watcher - AI Assistant that actively interacts with the world

Pré-requisitos​

Hardware necessário​

  • Dispositivo SenseCAP Watcher
  • Cabo de dados USB Tipo-C
  • PC com Windows
nota

Se você estiver gravando o Visual Activation Firmware e o modelo do seu dispositivo Watcher não for -EN, você também precisará gravar manualmente o arquivo de autenticação para uso normal (necessário apenas uma vez).
Para instruções detalhadas, consulte o Watcher Agent Firmware Flashing Guide.

Processo de gravação de firmware​

Pré-requisitos

Passo 1. Acesse o workspace do SenseCAP Watcher via SenseCraft AI > Models > Workspace > SenseCAP Watcher, ou use este link direto para o workspace.

Passo 2. Conecte-se à nossa plataforma pela porta serial

  • Clique em Connect

  • Selecione a porta serial correta (terminando com “A”)

nota

Se você estiver usando macOS ou Linux, escolha a porta com o número menor.

  • Clique em Connect

Passo 3. Verifique e atualize a versão do dispositivo

  • Clique em Update

  • Selecione a porta serial correta (terminando com "B")

    nota

    Se você estiver usando macOS ou Linux, escolha a porta com o número maior.

  • Clique em 'Connect'

  • Selecione a versão que você deseja gravar e clique em Confirm

  • Aguarde o processo de atualização e reinicialização

nota

Somente firmware na versão 1.8.8 ou superior oferece suporte à funcionalidade de despertar visual. Firmware acima da versão v2.0.3 exige dizer “Turn on the inference switch” para Xiaozhi para habilitar a detecção visual.

Processo de gravação do modelo de IA​

Passo 1. Acesse o workspace do SenseCAP Watcher via SenseCraft AI > Models > Workspace > SenseCAP Watcher, ou use este link direto para o workspace.

Passo 2. Conecte à nossa plataforma pela porta serial

  • Clique em Connect

  • Selecione a porta serial correta (terminando com “A”)

nota

Se você estiver usando macOS ou Linux, escolha a porta com o número menor.

  • Clique em Connect

Passo 3. Ver o modelo existente e trocar para um novo modelo

  • Ver o nome do modelo e a versão do modelo

  • Clique em Select Model... e clique no modelo que você deseja gravar

  • Clique em Confirm

Passo 4. Visualizar o efeito e ajustar o parâmetro

A função atual de despertar visual oferece as seguintes opções de configuração:

  • ID do alvo (target): Especifica o ID do alvo a ser detectado. Esse ID depende do modelo visual usado; o valor padrão é 0.
  • Duração da detecção (duration): A unidade é segundos, usada para ajustar a sensibilidade do despertar visual. O padrão é 1 segundo (esse padrão não inclui o processamento de debounce de 1 segundo).
  • Limite de confiança (threshold): O limite inferior de confiança para o modelo visual reconhecer um objeto, usado para ajustar a sensibilidade da detecção. Representado como uma porcentagem, o padrão é 75%.
  • Período de resfriamento (interval): A unidade é segundos, indicando o tempo de espera necessário após o término de uma conversa antes de disparar novamente, usado para evitar interrupções frequentes pelo mesmo objeto. O padrão é 8 segundos.

Por exemplo, você pode ajustar a sensibilidade do modelo modificando o parâmetro threshold. Se você achar que o limite atual está muito rigoroso, basta dizer ao Watcher: "Please set the confidence threshold to 60%".

Solução de problemas​

Problemas comuns​

  1. Nenhuma porta COM detectada

    • Certifique-se de que você está usando a porta Type-C inferior
    • Tente usar um cabo USB diferente
    • Verifique se os drivers USB estão instalados corretamente

  2. Falha ao gravar

    • Ao gravar o Himax, selecione a porta COM terminando com “A”.
    • Ao gravar o ESP32-S3, selecione a porta COM terminando com “B”.

  3. Dispositivo não responde

    • Use um pino para pressionar suavemente o botão de reset
    • Tente apagar antes de gravar

  4. O dispositivo não desperta com detecção visual

    • Verifique se há mensagens de log relevantes na saída serial.
    • A versão de firmware v2.0.3 exige dizer “Turn on inference switch” para Xiaozhi para habilitar essa função.

  5. A porta serial mostra logs de reconhecimento visual, mas o dispositivo ainda não consegue despertar

    • Vá para a plataforma SenseCraft AI e grave o modelo Person no chip de IA.

FAQ​

P: Posso gravar outros modelos de IA no Himax?

R: Atualmente, apenas os modelos Face e Person são suportados. Gravar outros modelos ainda não é suportado e estará disponível em uma atualização futura.

Suporte técnico​

Loading Comments...