Pular para o conteúdo principal

Gravando Modelos de IA no SenseCAP Watcher

Visão Geral​

Agradecimentos especiais ao XiaoZhi AI Chatbot por suas contribuições de código aberto que tornaram este projeto possível.

Este guia se concentra em como gravar no SenseCAP Watcher o firmware de Conversação Acionada por Reconhecimento Visual e em como substituir ou atualizar o modelo de IA no dispositivo. Ele é destinado como um guia prático e instrucional para essas operações.

Para uma introdução completa aos recursos, aplicações e casos de uso do Watcher, consulte: SenseCAP Watcher - AI Assistant that actively interacts with the world

Pré-requisitos​

Hardware Necessário​

  • Dispositivo SenseCAP Watcher
  • Cabo de dados USB Tipo-C
  • PC com Windows
nota

Se você estiver gravando o Firmware de Ativação Visual e o modelo do seu dispositivo Watcher não for -EN, você também precisará gravar manualmente o arquivo de autenticação para o uso normal (necessário apenas uma vez).
Para instruções detalhadas, consulte o Guia de Gravação de Firmware do Watcher Agent.

Processo de Gravação de Firmware​

  • Pré-requisitos

  • Etapa 1. Abra nossa plataforma e selecione SenseCAP Watcher em Workspace

  • Etapa 2. Conecte-se à nossa plataforma pela porta serial

    • Clique em Connect

    • Selecione a porta serial correta (terminando com “A”)

    nota

    Se você estiver usando macOS ou Linux, escolha a porta com o número menor.

    • Clique em Connect

  • Etapa 3. Verificar e Atualizar a Versão do Dispositivo

    • Clique em Update

    • Selecione a porta serial correta (terminando com "B")

    nota

    Se você estiver usando macOS ou Linux, escolha a porta com o número maior.

    • Clique em 'Connect'

    • Selecione a versão que você deseja gravar e clique em Confirm

    • Aguarde o processo de atualização e reinicialização

nota

Apenas firmware na versão 1.8.8 ou superior oferece suporte à funcionalidade de despertar visual. Firmware acima da versão v2.0.3 requer dizer “Turn on the inference switch” para Xiaozhi para habilitar a detecção visual.

Processo de Gravação do Modelo de IA​

Pré-requisitos​

Etapa 1. Abra nossa plataforma e selecione SenseCAP Watcher em Workspace​

Etapa 2. Conecte-se à nossa plataforma pela porta serial​

  • Clique em Connect

  • Selecione a porta serial correta (terminando com “A”)

nota

Se você estiver usando macOS ou Linux, escolha a porta com o número menor.

  • Clique em Connect

Etapa 3. Ver o modelo existente e alterar para um novo modelo​

  • Ver o nome do modelo e a versão do modelo

  • Clique em Select Model... e clique no modelo que você deseja gravar

  • Clique em Confirm

Etapa 4. Visualizar o efeito e ajustar o parâmetro​

A função atual de despertar visual oferece as seguintes opções de configuração:

  • ID de Alvo (target): Especifica o ID do alvo a ser detectado. Esse ID depende do modelo visual usado; o valor padrão é 0.
  • Duração da Detecção (duration): A unidade é segundos, usada para ajustar a sensibilidade do despertar visual. O padrão é 1 segundo (esse padrão não inclui o processamento de debounce de 1 segundo).
  • Limite de Confiança (threshold): O limite inferior de confiança para o modelo visual reconhecer um objeto, usado para ajustar a sensibilidade da detecção. Representado como uma porcentagem, o padrão é 75%.
  • Período de Resfriamento (interval): A unidade é segundos, indicando o tempo de espera necessário após o término de uma conversa antes de disparar novamente, usado para evitar interrupções frequentes pelo mesmo objeto. O padrão é 8 segundos.

Por exemplo, você pode ajustar a sensibilidade do modelo modificando o parâmetro threshold. Se você achar que o limite atual está muito rigoroso, basta dizer ao Watcher: "Please set the confidence threshold to 60%".

Solução de Problemas​

Problemas Comuns​

  1. Nenhuma porta COM detectada

    • Certifique-se de que você está usando a porta Type-C inferior
    • Tente usar um cabo USB diferente
    • Verifique se os drivers USB estão instalados corretamente

  2. Falha ao gravar

    • Ao gravar o Himax, selecione a porta COM terminando com “A”.
    • Ao gravar o ESP32-S3, selecione a porta COM terminando com “B”.

  3. O dispositivo não responde

    • Use um pino para pressionar suavemente o botão de reset
    • Tente apagar antes de gravar

  4. O dispositivo não acorda com detecção visual

    • Verifique se há mensagens de log relevantes na saída serial.
    • A versão de firmware v2.0.3 exige dizer “Turn on inference switch” para Xiaozhi para habilitar essa função.

  5. O serial mostra logs de reconhecimento visual, mas o dispositivo ainda não consegue acordar

    • Vá para a plataforma SenseCraft AI e grave o modelo Person no chip de IA.

Perguntas Frequentes (FAQ)​

P: Posso gravar outros modelos de IA no Himax?

R: No momento, apenas os modelos Face e Person são compatíveis. A gravação de outros modelos ainda não é suportada e estará disponível em uma atualização futura.

Suporte Técnico​

Loading Comments...