基于Mediapipe的摄像头手势识别

许多实用脚本和封装函数, 可以让您编写脚本更加便捷高效

Moderators: tmplinshi, arcticir

Post Reply
dbgba
Posts: 19
Joined: 02 Apr 2021, 22:11

基于Mediapipe的摄像头手势识别

Post by dbgba » 12 Aug 2022, 04:06

下载地址
由于此项目包含调用多个类库和文件,所以仅提供GitHub下载地址:

https://github.com/dbgba/VisualGestureRecognition

点击 “Code” 里的,”Download ZIP”即可下载源代码包

项目简介
基于AutoHotkey制作的摄像头手势识别软件。能让你的电脑摄像头在识别手势后,执行自定义的电脑操作命令。同时也集成了语音识别功能,可调用Windows自带API实现简单的语音助手功能。

手势识别调用了高性能的Mediapipe动态链接库来免部署实现。而电脑自动化操作使用AutoHotkey脚本语言来实现,它能更方便的对电脑进行深度调用和流程自动化处理。

使用介绍
测试环境:Win10 64位(专业版完整镜像)

第一次运行 Visual_Gesture_Recognition.exe时,会提示下载手势识别的依赖包。点击确定后,跟着提示点击自动下载。
1.jpg
1.jpg (70.3 KiB) Viewed 2084 times
等待下载完成后,软件会自动解压并适配手势识别功能。
  
2.jpg
2.jpg (74.77 KiB) Viewed 2084 times
之后就可以对你的摄像头进行手势识别控制了。下图示例为:当双手抬起并竖起大拇指时,就执行打开网页并放大网页。
  
3.jpg
3.jpg (61.81 KiB) Viewed 2084 times
软件还附带了调用Windows自带API来实现的免费语音助手。


更多玩法和用法,请详见设置与帮助的具体说明。例如:当摄像头中有人时,自动切换到虚拟桌面。 想创造更多自动化玩法组合,可使用软件附带的生成快捷代码和AHK中文帮助文档来实现自己的定制需求。
注意事项
此exe文件为AutoHotkey开源项目,请将其加入杀毒-信任区。避免不必要的麻烦。

手势识别需要借助电脑的摄像头实现(任意摄像头都行),而语音识别需要接电脑麦克风实现。由于语音识别是调用Windows自带API来实现的,有些系统为了缩减体积会删掉此语音识别播报API导致无效。用原版镜像上安装的系统基本都不会出这问题。

我添加了4个手势依赖包的镜像源供高速下载,如果出现某个镜像源无法下载的情况。可根据弹出提示点击重新换源下载即可。如果镜像源和官方源自动下载都失效,只能自行想办法从官方GitHub下载”GoogleMediapipePackageDll-main.zip”压缩包后,将压缩包存放在”Lib”目录中,重启软件即可识别压缩包并解压适配手势识别功能。

感谢以下项目
https://github.com/peng-zhihui/ElectronBot

https://github.com/HW140701/GoogleMediapipePackageDll


Written for English-speaking users

Due to my poor English and the extensive use of Chinese variable names in the script. This makes it difficult to convert to an English interface. However, I have left comments in the "Lib", "_Mediapipedll.ahk" and "_SpeechRecognition.ahk" in English. By moving them to the root directory, the Gui interface can be removed and run independently, so that the calling code can also be read efficiently.

sanmaodo
Posts: 45
Joined: 28 Aug 2020, 01:39

Re: 基于Mediapipe的摄像头手势识别

Post by sanmaodo » 17 Aug 2022, 08:41

没想到 ahk 还能实现这种功能,这很有用,感谢!

Post Reply

Return to “脚本函数”