Control de Luces Basado en Pose con Node-Red y Raspberry Pi con AIkit
Introducción
Este wiki te guiará sobre cómo ejecutar YOLOv8 usando un kit de IA, usar YOLOv8 para monitorear tu postura, y finalmente controlar tus luces basándose en tu postura. En este proyecto, una cámara USB captura tu pose, y yolov8n ejecutándose en AI kit con reComputer R1000 para detectar tu pose. El video procesado, mostrando la pose detectada, se transmite luego en tiempo real a reTerminal DM usando gstreamer. Mientras tanto, las coordenadas de las articulaciones se envían usando mqtt a Node-RED que se despliega en el reComputer R1000. Por último, el flujo de Node-RED controla las luces inteligentes basándose en las coordenadas de las articulaciones.
Preparar Hardware
| reComputer r1000 | reTerminal DM | Raspberry Pi AI Kit |
|---|---|---|
 |  |  |
Ejecutar este proyecto
En reComputer R1000
Paso 1: Instalar el kit de IA
Por favor consulta esta wiki y asegúrate de instalar el kit de IA en tu reComputer R1000.
Paso 2: Instalar el proyecto
Descarga el proyecto con el siguiente comando:
git clone https://github.com/LJ-Hao/Pose-Based_Light_Control_with_Node-Red_and_Raspberry_Pi_with_AIkit.git && cd Pose-Based_Light_Control_with_Node-Red_and_Raspberry_Pi_with_AIkit
Paso 3: Ejecutar la estimación de pose
Edita el archivo pose_estimation.py y cambia el mqtt_server a la dirección IP de tu reTerminal DM. Y cambia el Gstreamer pipeline a la dirección IP de tu reTerminal DM. Y luego ejecuta el comando a continuación para iniciar la estimación de pose.
bash run.sh
Paso 4: Instalar Node-RED
Instalar Node-RED. Puedes descargar Node-RED con solo una línea de comando:
bash <(curl -sL https://raw.githubusercontent.com/node-red/linux-installers/master/deb/update-nodejs-and-nodered)
Paso 5: Importar flows.json
Importar archivos del proyecto. Haz clic en Settings => Import en la esquina superior derecha, click select a file para importar en la nueva ventana emergente, selecciona flows.jeson, y finalmente haz clic en Import.
Paso 6: Descargar los controles requeridos
Después de importar el archivo del proyecto, el sistema puede indicar que tu node-red carece de algunos controles. Necesitas descargar los siguientes controles:
@bartbutenaers/node-red-rtsp-to-mjpeg
@chirpstack/node-red-contrib-chirpstack
@flowfuse/node-red-dashboard
node-bacnet-contrib-extended
node-red-contrib-buffer-parser
node-red-contrib-image-output
node-red-contrib-image-tools
node-red-contrib-modbus
node-red-contrib-msg-speed
node-red-contrib-multipart-stream-encoder
node-red-contrib-onvif
node-red-contrib-play-audio
node-red-dashboard
node-red-node-base64
node-red-node-mysql
node-red-node-pi-gpio
node-red-node-ping
node-red-node-serialport
node-red-node-smooth
node-red-sensecap-paas
node-red-node-random
Tomando node-red-node-random como ejemplo, haz clic en Settings => Manage Palette en la esquina superior derecha, selecciona la columna Install en la nueva ventana, ingresa node-red-node-random, y finalmente haz clic en el botón Install.
Paso 7: Desplegar el proyecto
Haz clic en el botón deploy en la esquina superior derecha y el sistema funcionará normalmente.
En reTerminal DM
Paso 1: Instalar gstreamer en reTerminal DM
Descarga gstreamer con el siguiente comando:
sudo apt-get install libgstreamer1.0-dev libgstreamer-plugins-base1.0-dev libgstreamer-plugins-bad1.0-dev gstreamer1.0-plugins-base gstreamer1.0-plugins-good gstreamer1.0-plugins-bad gstreamer1.0-plugins-ugly gstreamer1.0-libav gstreamer1.0-tools gstreamer1.0-x gstreamer1.0-alsa gstreamer1.0-gl gstreamer1.0-gtk3 gstreamer1.0-qt5 gstreamer1.0-pulseaudio
Paso 2: Instalar el repositorio
Descarga el repositorio con el siguiente comando:
git clone https://github.com/LJ-Hao/Pose-Based_Light_Control_with_Node-Red_and_Raspberry_Pi_with_AIkit.git && cd Pose-Based_Light_Control_with_Node-Red_and_Raspberry_Pi_with_AIkit
Paso 3: Ejecutar el receptor de video
python3 video_receiver.py
Resultado
Mostramos esta demostración en una transmisión en vivo de YouTube que comienza en 19:47. Y puedes ver que la luz se encenderá cuando la presentadora aplauda, luego la luz se apagará cuando la presentadora agite su mano, disfruta esta demostración:
Soporte Técnico y Discusión de Productos
¡Gracias por elegir nuestros productos! Estamos aquí para brindarte diferentes tipos de soporte para asegurar que tu experiencia con nuestros productos sea lo más fluida posible. Ofrecemos varios canales de comunicación para satisfacer diferentes preferencias y necesidades.