![](http://k.sinaimg.cn/n/sinakd20211125s/154/w1080h674/20211125/51f1-135945ea602e6e112f1cfb8726593c32.png/w700d1q75cms.jpg)
还记得一个半月前火爆全网的钢铁侠机械臂Dummy吗?
就是出自华为天才少年“稚晖君”之手,能给葡萄缝针的那个!
![](http://k.sinaimg.cn/n/sinakd20211125s/672/w432h240/20211125/ca8a-be339877a96a47de73ddadbaa17fc0c0.gif/w700d1q75cms.jpg)
在厕所远程遥控、实时完成!
![](http://k.sinaimg.cn/n/sinakd20211125s/672/w432h240/20211125/b270-6708102142318895720594712ecb4bcb.gif/w700d1q75cms.jpg)
这台如同《钢铁侠》里一样强悍的机械臂Dummy,让不少业内人士看完直呼好强,视频一出,弹幕再次被网友刷疯,纷纷表示:
![](http://k.sinaimg.cn/n/sinakd20211125s/2/w514h288/20211125/6a10-ba8c570e052d41c8ccd6468d178b16c9.jpg/w700d1q75cms.jpg)
之前的视频中,Dummy机械臂实现了7种交互方式,不过这还不够,时隔一个半月,稚晖君的「钢铁侠机械臂」系列又更新了!
加上AI视觉,2小时学会抓螺母
Dummy再次出现,又给我们带来了什么惊喜呢?
这次,稚晖君用Dummy做了个AI视觉抓取demo,让机械臂自己去抓取螺母。
![](http://k.sinaimg.cn/n/sinakd20211125s/672/w432h240/20211125/999a-755ef42d8b990c8970a68fd169e839c1.gif/w700d1q75cms.jpg)
将三个螺母放在白纸上,Dummy精准地识别到了螺母的位置,利用灵活的力反馈夹爪,抓取并放在目标位置上。
![](http://k.sinaimg.cn/n/sinakd20211125s/672/w432h240/20211125/4782-7508e4835e5c2ea8c488f33af8b022f7.gif/w700d1q75cms.jpg)
好不容易放上去的螺母又被稚晖君拿下来了,行吧,那就再抓一次。
![](http://k.sinaimg.cn/n/sinakd20211125s/672/w432h240/20211125/1efa-179fa57a2714add3ef37474e2109e154.gif/w700d1q75cms.jpg)
机械臂:“怎么又拿下来了?玩我是吧?”
![](http://k.sinaimg.cn/n/sinakd20211125s/630/w420h210/20211125/fc05-f010badfb1b6cf56509d4c8b2e94f6ce.jpg/w700d1q75cms.jpg)
稚晖君介绍,目前用Dummy做了个简单的AI视觉抓取demo,从模型训练到部署只花了2个小时。
后面会把迁移学习功能加入上位机Dummy Studio中,最终想实现的效果就是,可以用少量数据标注就自动生成端到端的模型来检测自定义物品。
![](http://k.sinaimg.cn/n/sinakd20211125s/672/w432h240/20211125/715c-f1ebdfc1712c58cc2951ea2f946b030c.gif/w700d1q75cms.jpg)
同时,可以用图形化的方式调用各种算法模块,配合后面的Dummy青春(低成本)版,大家应该可以用来做很多有趣的事情。
表面上看起来是电子和机械,背后全是算法和数学
这款机械臂从里到外全部由稚晖君一人完成,耗时4个半月,其复杂与困难程度可想而知,光是结构设计图就画了150个版本:
![](http://k.sinaimg.cn/n/sinakd20211125s/672/w432h240/20211125/d6e4-c79275a546465259273a82e15ea32f9d.gif/w700d1q75cms.jpg)
解决了机械臂的电机、驱动器、减速器三大硬件部分后,更重要的是它的“灵魂”——控制、算法和数学等。
![](http://k.sinaimg.cn/n/sinakd20211125s/672/w432h240/20211125/6e01-f8c858b97013f0d1292e92354b59698a.gif/w700d1q75cms.jpg)
控制器相当于机械臂的「小脑」,用来操控机械臂的动作、来实现各种功能。
![](http://k.sinaimg.cn/n/sinakd20211125s/672/w432h240/20211125/cec9-e827ab28803db89e977c68c565573e66.gif/w700d1q75cms.jpg)
AI视觉算法相当于让机械臂“长了双眼睛”,让机械臂能够看见、并操作需要完成的任务。
![](http://k.sinaimg.cn/n/sinakd20211125s/672/w432h240/20211125/999a-755ef42d8b990c8970a68fd169e839c1.gif/w700d1q75cms.jpg)
在交互上,稚晖君也有自己的想法,“我想要打造的机械臂,是具备多种交互方式的。”
机械臂实现了7种交互方式,从最简单的USB串口命令控制机械臂:
![](http://k.sinaimg.cn/n/sinakd20211125s/672/w432h240/20211125/e026-d56c54f0f6ae282db00109e94b6d3cd8.gif/w700d1q75cms.jpg)
到图形化上位机傻瓜式拖拽交互:
![](http://k.sinaimg.cn/n/sinakd20211125s/672/w432h240/20211125/26e0-e86522eacce607d575e1675cdc078275.gif/w700d1q75cms.jpg)
再到AR,结合增强显示技术,实现这样的效果:
![](http://k.sinaimg.cn/n/sinakd20211125s/672/w432h240/20211125/aaab-25a88f3dbc80f85981351a1eacba0cb8.gif/w700d1q75cms.jpg)
最炫酷的是坐在厕所里,就能利用手势远程操控机械臂给葡萄做一场手术!
![](http://k.sinaimg.cn/n/sinakd20211125s/672/w432h240/20211125/b270-6708102142318895720594712ecb4bcb.gif/w700d1q75cms.jpg)
正如视频中稚晖君自己总结的那样:“这个项目表面上看起来是电子和机械,其实背后全是算法和数学。”
网友开玩笑称:
![](http://k.sinaimg.cn/n/sinakd20211125s/108/w529h379/20211125/2cab-eab5d9f3e92abc55c147142817ab9006.jpg/w700d1q75cms.jpg)
也不是没有这个可能嘛。
【视频链接】
https://www.bilibili.com/video/BV1xY41147oh
![](http://n.sinaimg.cn/finance/pc/cj/kandian/img/article_pic05.png)
4000520066 欢迎批评指正
All Rights Reserved 新浪公司 版权所有