首页 游戏 软件 资讯 排行榜 专题
首页
AI
【AI达人创造营第二期】基于jetsonnano部署的手势乐器--模型部署

【AI达人创造营第二期】基于jetsonnano部署的手势乐器--模型部署

热心网友
47
转载
2025-07-20
该项目利用Jetson Nano结合PaddleDetection训练的模型,经Tensorrt加速实现手势检测,通过Arduino控制外设输出音阶。8种手势对应14种音阶(含八度抬高),文中详述了设备连接、环境配置、模型部署及相关代码。

【ai达人创造营第二期】基于jetsonnano部署的手势乐器--模型部署 - 游乐网

0.简介

首先感谢百度Paddle为我提供的硬件设备,为每一个梦想插上了翅膀

免费影视、动漫、音乐、游戏、小说资源长期稳定更新! 👉 点此立即查看 👈

一枚热爱技术的菜鸡,今天想做一个目标检测和嵌入式的结合体,做一个jetson nano乐器

【AI达人创造营第二期】基于jetsonnano部署的手势乐器--模型部署 - 游乐网

方案:

使用paddledetection训练模型并使用paddleInference在jetson nano上部署目标检测网络,

使用Tensorrt进行Jetsonnano的加速,

达到一个令人满意的FPS,检测简单手势,

然后再通过nano控制beep等外设,来达到beep的变频输出

使用7种手势代表7种音阶

do、re、mi、fa、sol、la、si

且为了使得音调更加丰富,我使用了第八种手势,当第八种手势出现在画面中的时候,音阶就会上抬一个八度,于是我们获得了十四个音阶

do、re、mi、fa、sol、la、si、ddo、dre、dmi、dfa、dsol、dla、dsi

从左向右从上往下依次是12 .....最后一个是音阶抬高记号

【AI达人创造营第二期】基于jetsonnano部署的手势乐器--模型部署 - 游乐网

视频演示

配料表:

Jetson nano x1 Arduino x1 摄像头 x1

电源、无线网卡、网线、风扇

如有外接显示器可以直接用外接显示器而不需要网线连SSH

【AI达人创造营第二期】基于jetsonnano部署的手势乐器--模型部署 - 游乐网

1.JetsonNano的部署

我这里有一块上好的JetsonNano板,打算在同一局域网下使用ssh连接下面详述

1.Jetson nano的连接

首先如果你有屏幕可以直接用屏幕本条就可以直接忽略

但是如果你是像我一样没有屏幕的玩家,可以通过serial串口进行连接、ssh进行连接、或者VNC远程桌面连接

我是没有显示屏的,我采用的是先使用串口进行连接,使用笔记本电脑开启移动热点,然后使用nano命令行连接wifi,再查询ip地址,知道了ip地址就可以使用ssh连接或使用VNC远程桌面了

使用串口连接,连接

下面是jetson nano的引脚图

【AI达人创造营第二期】基于jetsonnano部署的手势乐器--模型部署 - 游乐网

按照此引脚图进行连接

【AI达人创造营第二期】基于jetsonnano部署的手势乐器--模型部署 - 游乐网

使用putty,采用对应的COM口,使用波特率115200

【AI达人创造营第二期】基于jetsonnano部署的手势乐器--模型部署 - 游乐网

首先使用命令进行网络设备扫描

sudo nmcli dev
登录后复制

【AI达人创造营第二期】基于jetsonnano部署的手势乐器--模型部署 - 游乐网

可以看见我有wlan0 作为wifi设备,这里我已经连接过了,所以显示connected

使用命令

sudo nmcli dev wifi connect "wifi名称" password "wifi密码" ifname wlan0
登录后复制

进行wifi的连接

然后我们可以使用ping命令检测网络的连通性,这里我直接ping百度了,可以看见是连通的

【AI达人创造营第二期】基于jetsonnano部署的手势乐器--模型部署 - 游乐网

使用命令

ifconfig
登录后复制

命令查看ip地址,在wlan0后,显示了ip地址:划红线的地方

【AI达人创造营第二期】基于jetsonnano部署的手势乐器--模型部署 - 游乐网

2.查看CUDA版本与jetpack版本以选择预测库

nvcc -V

来查看cuda版本

【AI达人创造营第二期】基于jetsonnano部署的手势乐器--模型部署 - 游乐网

这里可以看到我的cuda是10.2的

使用命令

sudo apt-cache show nvidia-jetpack
登录后复制

【AI达人创造营第二期】基于jetsonnano部署的手势乐器--模型部署 - 游乐网

由Filename可以看出

Filename: pool/main/n/nvidia-jetpack/nvidia-jetpack_4.4-b144_arm64.deb
登录后复制

我的jetpack版本为jetpack_4.4

3.部署安装paddle

这里我直接使用whl包安装对应的linux的预测库

预测库地址

按照上述的对应版本最终我选用了 Jetpack4.5(4.4): nv_jetson-cuda10.2-trt7-nano

4.部署paddledet

如同aistudio上部署一样,我们依然需要先git clone以下paddledetection的库这里不再赘述

git clone https://gitee.com/paddlepaddle/PaddleDetection.git

依然是

#进入文件夹cd PaddleDetection/#安装其他依赖pip3 install -r requirements.txt#编译安装paddledetcd PaddleDetectionpython3 setup.py install
登录后复制

当命令行最后一行执行出现

Finished processing dependencies for paddledet==2.3.0

完成安装

通过后可以通过

python ppdet/modeling/tests/test_architectures.py

检测一下是否成功

出现下图时即可判定成功

按照最新给的教程来即可,或者好像可以直接pip安装包,连编译都不要

【AI达人创造营第二期】基于jetsonnano部署的手势乐器--模型部署 - 游乐网

没使用Tensorrt的板子算力就是弱,跑了我46秒多

这里可以看见报了个Warning,不过不用担心,只要不是Error就可以当作看不见

来源:https://www.php.cn/faq/1410129.html
免责声明: 游乐网为非赢利性网站,所展示的游戏/软件/文章内容均来自于互联网或第三方用户上传分享,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系youleyoucom@outlook.com。

相关攻略

37年历史落幕!Linux取消支持Intel 486 CPU
电脑教程
37年历史落幕!Linux取消支持Intel 486 CPU

4月6日消息,诞生37年的Intel486处理器,即将彻底告别现代Linux系统。据科技媒体Phoronix报道,Linux内核开发者已启动对486处理器支持的移除工作,相关补丁确认将合入Linux

热心网友
04.07
Win11 → WSL2 → Ubuntu → OpenClaw大龙虾安装
AI
Win11 → WSL2 → Ubuntu → OpenClaw大龙虾安装

Win11 → WSL2 → Ubuntu → OpenClaw 的直接流程 想在 Windows 上顺畅地用上 OpenClaw?其实核心就一条:先在 WSL2 里搭好 Ubuntu 这个“标准环境”。下面这个流程,你按顺序一步步执行就行,能避开不少弯路。 第一步:安装 WSL2 与 Ubuntu

热心网友
04.07
wsl安装OpenClaw
AI
wsl安装OpenClaw

参考指南与学习资料 若您希望在本地快速搭建并部署一个个人智能助手,OpenClaw 框架是一个理想的入门选择。为了帮助开发者更高效地上手,社区中已有丰富的学习资源与讨论可供参考,主要包括:OpenClaw 新手入门教程、核心命令行工具使用指南(openclaw -h 查看帮助)、配置文件的参数详解,

热心网友
04.02
openclaw 究极离谱的坑
AI
openclaw 究极离谱的坑

1 openclaw 工具权限报错解决方案:无法使用 exec read write webfetch 等工具的修复方法 当您在配置 openclaw 时遇到工具权限报错,提示缺少 exec、read、write、webfetch 等关键工具的使用权限,通常无需深入排查复杂的系统环境。此问题在多数

热心网友
04.02
OpenClaw 安装教程(Linux)
AI
OpenClaw 安装教程(Linux)

本次部署指南的核心目标非常明确:在 Linux 环境中,无论是云服务器还是本地物理机,我们都需要完整地完成 OpenClaw 智能体框架的安装与部署,并通过基础的健康检查与功能验证,确保整个系统能够成功启动并稳定运行。 一、环境要求 在开始动手安装之前,我们首先需要确认系统满足所有的基础运行环境要求

热心网友
04.02

最新APP

宝宝过生日
宝宝过生日
应用辅助 04-07
台球世界
台球世界
体育竞技 04-07
解绳子
解绳子
休闲益智 04-07
骑兵冲突
骑兵冲突
棋牌策略 04-07
三国真龙传
三国真龙传
角色扮演 04-07

热门推荐

美国SEC主席Paul Atkins证实:加密货币安全港提案已送交白宫审查
web3.0
美国SEC主席Paul Atkins证实:加密货币安全港提案已送交白宫审查

加密货币行业翘首以盼的监管里程碑,终于有了实质性进展。美国证券交易委员会(SEC)主席保罗·阿特金斯(Paul Atkins)近日证实,那份允许加密项目在早期获得注册豁免权的“安全港”框架提案,已经正式送抵白宫,进入了最终审查阶段。 在范德堡大学与区块链协会联合举办的数字资产峰会上,阿特金斯透露了这

热心网友
04.08
微策略Strategy报告:第一季录得144.6亿美元浮亏 再斥资约3.3亿美元买进4871枚比特币
web3.0
微策略Strategy报告:第一季录得144.6亿美元浮亏 再斥资约3.3亿美元买进4871枚比特币

微策略Strategy报告:第一季录得144 6亿美元浮亏 再斥资约3 3亿美元买进4871枚比特币 市场震荡的威力有多大?看看Strategy的最新季报就明白了。根据其最新向美国证管会(SEC)提交的8-K报告,受市场剧烈波动影响,这家公司所持的比特币在第一季度录得了一笔惊人的数字——144 6亿

热心网友
04.08
稳定币发行商Tether再扩Web3版图!Paolo Ardoino:正开发去中心化搜索引擎Hypersearch
web3.0
稳定币发行商Tether再扩Web3版图!Paolo Ardoino:正开发去中心化搜索引擎Hypersearch

稳定币巨头Tether的动向,向来是加密世界的风向标。这不,它向Web3基础设施的版图扩张,又迈出了关键一步。公司执行长Paolo Ardoino在社交平台X上透露,其工程团队正在全力“烹制”一个新项目——去中心化搜索引擎 “Hypersearch”。这个消息一出,立刻引发了行业的广泛猜想。 采用D

热心网友
04.08
Base链首个原生DeFi借贷协议Seamless Protocol倒闭 将于2026年6月30日下线
web3.0
Base链首个原生DeFi借贷协议Seamless Protocol倒闭 将于2026年6月30日下线

基地位于Coinbase旗下以太坊Layer2网络Base的Seamless Protocol,日前正式宣告了服务的终结。这个曾经吸引了超过20万用户的原生DeFi借贷协议,在运营不到三年后,终究没能跑赢时间。它主打的核心产品是Integrated Leverage Markets(ILMs)——一

热心网友
04.08
PAAL代币如何参与治理?社区投票能决定哪些事项?
web3.0
PAAL代币如何参与治理?社区投票能决定哪些事项?

PAAL代币揭秘:深度解析Web3社区治理的核心钥匙 在去中心化自治组织的浪潮中,谁真正掌握了项目的话语权?PAAL代币提供了一套系统化的答案。它不仅是生态内流转的价值媒介,更是开启链上治理大门的核心凭证。通过持有并质押PAAL代币,用户能够对协议升级、资金分配乃至战略方向等关键事务投出决定性的一票

热心网友
04.08