博客家

映射舞蹈同步运动和舞台灯光使用tinyML

beplay体育app 苹果Arduino团队- - - - - -2021年的10月22日

能够添加与舞者同步的动态灯光和图像对许多依赖音乐和视觉效果来创造表演的表演来说是很重要的。爱德华多Padron目的就是要做到这一点通过使用加速计监测表演者的动作,并根据已识别的动作触发适当的自动驾驶体验。

Padrón的系统是围绕Raspberry Pi 4设计的,运行一个MQTT服务器,用于与辅助物联网板通信。移动数据是通过一个Nano 33 BLE Sense以及它的机载加速度计来收集信息并将其发送到谷歌Colab环境中。从这里开始,在这些样本上训练了600个时代的模型,达到了91%左右的精度。在将这个模型部署到Arduino上之后,他能够通过USB输出正确的手势,beplay体育app 苹果并在USB上与正在运行的Python脚本进行交互。一旦接收到手势,MQTT服务器将消息发布到任何客户机设备(如ESP8266),用于照明并播放相关的视频或声音。

Padrón计划在未来为他的系统添加更多的功能,如蓝牙连接、动态雕塑和更多的动画效果。你可以阅读更多关于他的项目,它被命名为TensorFlow Lite微控制器挑战赛的获胜者在DevPost

留下一个回复

你必须用你的Arduino账号登陆beplay体育app 苹果发表评论。