量子位 宣布 | "大众年夜众号 QbitAI
空中画符的中二技能，谁不想拥有呢？
不如捏一只万能的AI来当邪术画笔吧。
这是一个用来写写画画的手部跟踪程序，开拓者将它命名为YoHa（Your Hand Tracking）。
这个程序基于TensorFlow.js实现了实时识别功能，能达到不卡顿、无延迟的效果。
捏起手指就可以变成画笔，清空画布也只需握拳就能办到。
用YoHa给自己画殊效的效果这么好，难怪可以得到555颗星。
这只AI怎么玩？这款手势识别程序已经开源，开拓者Benjamin大方地供应给了所有人利用“邪术”的机会。
既可以安装在自己的电脑上来玩，一行代码就能轻松实现。
npm install @handtracking.io/yoha
也可以在线试玩，直接用网页下载模型写写画画。
虽然YoHa目前只能对捏手指和握拳两个指令动作做出功能相应，但是由于有TensorFlow.js加持，它的性能可一点都不低。
21个手部枢纽关头定位，旁边手方向检测，手部姿势检测等都可以实时实现。
来看看“买家秀”是不是也一样秀。
原来成为不了法师只是由于符文画太丑
如此好玩的AI背后，究竟是什么事理呢？
YoHa模型利用TensorFlow.js深度学习框架来进行从头演习，开拓过程包含了演习步骤和推理步骤两大部分。
它的模型演习阶段利用了自定义神经网络，以自定义数据集作为演习数据，而在线实时推理则用到了TensorFlow.js推理框架。
不过，由于TensorFlow.js规模的限定，比起电脑，YoHa在移动设备上的表现较差。
其余，YoHa确当地运行速率也比在线试玩快很多，果真驯服AI还是得先带回家里养。
手势识别有什么用？YoHa的开拓者Benjamin提到，制作这个项目一开始是为了增加网络的互动性：
“现有的办理方案没有我想要的，以是我给自己创建了新的办理方案”
不愧是动手能力强的大佬，没有自己想要的，那就自己造一个。
手势识别这么火，干脆多开拓一些玩法，添加更丰富的功能让VR/AR更好玩。
针对之条件到的YoHa性能毛病，Benjamin也给玩家供应了高性能备选方案：通用手势识别模型MediaPipe。
如果高端玩家对性能有更高追求，可以在这个经典模型根本上进行功能扩展。
比如不久前以MediaPipe为根本开拓的类似项目air-drawing，在玩法上和YoHa稍有不同。
感兴趣的话，自己去驯服一只AI来写字画画吧。
GitHub地址：https://github.com/handtracking-io/yoha试玩地址：https://handtracking.io/draw_demo/https://loicmagne.github.io/air-drawing/
— 完 —
量子位 QbitAI · 头条号签约
关注我们，第一韶光获知前沿科技动态