位置: IT常识 - 正文

openCV实践项目:拖拽虚拟方块(opencv项目开发实战)

编辑:rootadmin
openCV实践项目:拖拽虚拟方块 一、项目效果:

推荐整理分享openCV实践项目:拖拽虚拟方块(opencv项目开发实战),希望有所帮助,仅作参考,欢迎阅读内容。

文章相关热门搜索词:opencv编程案例详解,opencv实验总结,opencv三大经典项目实战,opencv三大经典项目实战,opencv实验总结,opencv实战项目,opencv实验总结,opencv实验总结,内容如对您有帮助,希望把文章链接给更多的朋友!

学校宿舍今天搬家,累麻了,突然发现展示处理的也很粗糙,就这样吧嘿嘿~~~

二、核心流程:

1、openCV读取视频流、在每一帧图片上画一个矩形。

2、使用mediapipe获取手指关键点坐标。

3、根据手指坐标位置和矩形的坐标位置,判断手指点是否在矩形上,如果在则矩形跟随手指移动。

三、代码流程:环境准备:python: 3.8.8opencv: 4.2.0.32mediapipe: 0.8.10.1

注:

openCV实践项目:拖拽虚拟方块(opencv项目开发实战)

1、opencv版本过高或过低可能出现一些如摄像头打不开、闪退等问题,python版本影响opencv可选择的版本。

2、pip install mediapipe 后可能导致openCV无法正常使用,卸了重新下载,习惯了就好。

1. 读取摄像头视频,画矩形:import cv2import timeimport numpy as np# 调用摄像头 0 默认摄像头 cap = cv2.VideoCapture(0)# 初始方块数据x = 100y = 100w = 100h = 100# 读取一帧帧照片while True: # 返回frame图片 rec,frame = cap.read() # 镜像 frame = cv2.flip(frame,1) # 画矩形 cv2.rectangle(frame, (x, y), (x + w, y + h), (255, 0, 255), -1) # 显示画面 cv2.imshow('frame',frame) # 退出条件 if cv2.waitKey(1) & 0xFF == ord('q'): breakcap.release()cv2.destroyAllWindows()

这是很基础的一步操作,此时我们运行这段代码,摄像头打开,我们会惊讶地看到自己英俊的脸庞,且左上角有个100*100的紫色矩形。

2. 导入mediapipe处理手指坐标pip install mediapipe

此时可能出现一些问题,比如openCV突然用不了了,没关系,卸载了重新下。

mediapipe详细信息:Hands - mediapipe (google.github.io)

简单来说,它会返回给我们21个手指关键点的坐标,即它在视频画面的位置比例( 0~1 ),我们乘以对应画面的宽高,就能得到手指对应的坐标了。

本次用到食指和中指指尖,也就是8号和12号。

2.1 配置一些基础信息:import cv2import timeimport numpy as npimport mediapipe as mpmp_drawing = mp.solutions.drawing_utilsmp_drawing_styles = mp.solutions.drawing_stylesmp_hands = mp.solutions.handshands = mp_hands.Hands( static_image_mode=True, max_num_hands=2, min_detection_confidence=0.5)2.2 在处理每一帧图像时,加入: frame.flags.writeable = False frame = cv2.cvtColor(frame, cv2.COLOR_BGR2RGB) # 返回结果 results = hands.process(frame) frame.flags.writeable = True frame = cv2.cvtColor(frame, cv2.COLOR_RGB2BGR)

当我们在视频流中读取每一帧图片时,将其从BGR转为RGB供给mediapipe生成的hands对象读取,它会返回这张图片中手指关键点的信息,我们只需要继续对其作画,画在每一帧图片上。

# 如果结果不为空 if results.multi_hand_landmarks: # 遍历双手(根据读取顺序,一只只手遍历、画画) for hand_landmarks in results.multi_hand_landmarks: mp_drawing.draw_landmarks( frame, hand_landmarks, mp_hands.HAND_CONNECTIONS, mp_drawing_styles.get_default_hand_landmarks_style(), mp_drawing_styles.get_default_hand_connections_style())2.3 至此步骤完整代码import cv2import timeimport numpy as npimport mediapipe as mpmp_drawing = mp.solutions.drawing_utilsmp_drawing_styles = mp.solutions.drawing_stylesmp_hands = mp.solutions.handshands = mp_hands.Hands( static_image_mode=True, max_num_hands=2, min_detection_confidence=0.5)# 调用摄像头 0 默认摄像头 cap = cv2.VideoCapture(0)# 方块初始数组x = 100y = 100w = 100h = 100# 读取一帧帧照片while True: # 返回frame图片 rec,frame = cap.read() # 镜像 frame = cv2.flip(frame,1) frame.flags.writeable = False frame = cv2.cvtColor(frame, cv2.COLOR_BGR2RGB) # 返回结果 results = hands.process(frame) frame.flags.writeable = True frame = cv2.cvtColor(frame, cv2.COLOR_RGB2BGR) # 如果结果不为空 if results.multi_hand_landmarks: # 遍历双手(根据读取顺序,一只只手遍历、画画) # results.multi_hand_landmarks n双手 # hand_landmarks 每只手上21个点信息 for hand_landmarks in results.multi_hand_landmarks: mp_drawing.draw_landmarks( frame, hand_landmarks, mp_hands.HAND_CONNECTIONS, mp_drawing_styles.get_default_hand_landmarks_style(), mp_drawing_styles.get_default_hand_connections_style()) # 画矩形 cv2.rectangle(frame, (x, y), (x + w, y + h), (255, 0, 255), -1) # 显示画面 cv2.imshow('frame',frame) # 退出条件 if cv2.waitKey(1) & 0xFF == ord('q'): breakcap.release()cv2.destroyAllWindows()

此时我们运行看一下还挺有意思的:

3. 位置计算

我们这个实验要求拖动方块,那肯定也有不拖动的时候,因此不妨根据上一步获取食指(8)和中指(12)指尖的位置,如果这俩离得近,我们就在他与方块重合的时候,根据手指的位置改变方块的坐标。

完整代码:

import cv2import timeimport mathimport numpy as npimport mediapipe as mp# mediapipe配置mp_drawing = mp.solutions.drawing_utilsmp_drawing_styles = mp.solutions.drawing_stylesmp_hands = mp.solutions.handshands = mp_hands.Hands( static_image_mode=True, max_num_hands=2, min_detection_confidence=0.5)# 调用摄像头 0 默认摄像头 cap = cv2.VideoCapture(0)# cv2.namedWindow("frame", 0)# cv2.resizeWindow("frame", 960, 640)# 获取画面宽度、高度width = int(cap.get(cv2.CAP_PROP_FRAME_WIDTH))height = int(cap.get(cv2.CAP_PROP_FRAME_HEIGHT))# 方块初始数组x = 100y = 100w = 100h = 100L1 = 0L2 = 0on_square = Falsesquare_color = (0, 255, 0)# 读取一帧帧照片while True: # 返回frame图片 rec,frame = cap.read() # 镜像 frame = cv2.flip(frame,1) frame.flags.writeable = False frame = cv2.cvtColor(frame, cv2.COLOR_BGR2RGB) # 返回结果 results = hands.process(frame) frame.flags.writeable = True frame = cv2.cvtColor(frame, cv2.COLOR_RGB2BGR) # 如果结果不为空 if results.multi_hand_landmarks: # 遍历双手(根据读取顺序,一只只手遍历、画画) # results.multi_hand_landmarks n双手 # hand_landmarks 每只手上21个点信息 for hand_landmarks in results.multi_hand_landmarks: mp_drawing.draw_landmarks( frame, hand_landmarks, mp_hands.HAND_CONNECTIONS, mp_drawing_styles.get_default_hand_landmarks_style(), mp_drawing_styles.get_default_hand_connections_style()) # 记录手指每个点的x y 坐标 x_list = [] y_list = [] for landmark in hand_landmarks.landmark: x_list.append(landmark.x) y_list.append(landmark.y) # 获取食指指尖 index_finger_x, index_finger_y = int(x_list[8] * width),int(y_list[8] * height) # 获取中指 middle_finger_x,middle_finger_y = int(x_list[12] * width), int(y_list[12] * height) # 计算两指尖距离 finger_distance = math.hypot((middle_finger_x - index_finger_x), (middle_finger_y - index_finger_y)) # 如果双指合并(两之间距离近) if finger_distance < 60: # X坐标范围 Y坐标范围 if (index_finger_x > x and index_finger_x < (x + w)) and ( index_finger_y > y and index_finger_y < (y + h)): if on_square == False: L1 = index_finger_x - x L2 = index_finger_y - y square_color = (255, 0, 255) on_square = True else: # 双指不合并/分开 on_square = False square_color = (0, 255, 0) # 更新坐标 if on_square: x = index_finger_x - L1 y = index_finger_y - L2 # 图像融合 使方块不遮挡视频图片 overlay = frame.copy() cv2.rectangle(frame, (x, y), (x + w, y + h), square_color, -1) frame = cv2.addWeighted(overlay, 0.5, frame, 1 - 0.5, 0) # 显示画面 cv2.imshow('frame',frame) # 退出条件 if cv2.waitKey(1) & 0xFF == ord('q'): breakcap.release()cv2.destroyAllWindows()
本文链接地址:https://www.jiuchutong.com/zhishi/298672.html 转载请保留说明!

上一篇:微服务 Spring Boot Mybatis-Plus 整合 EasyPOI 实现 Excel 一对多 导入(微服务springboot结构)

下一篇:保姆级教程:Ant Design Vue中 a-table 嵌套子表格(保姆级教程什么意思)

  • 做好网络推广必备的三大项(网络推广要点)

    做好网络推广必备的三大项(网络推广要点)

  • QQ已经实名制的未成年怎么改(QQ已经实名制的未成年怎么改游戏)

    QQ已经实名制的未成年怎么改(QQ已经实名制的未成年怎么改游戏)

  • 抖音主页访客关闭后别人能看到吗(抖音主页访客关闭对方还会看到吗)

    抖音主页访客关闭后别人能看到吗(抖音主页访客关闭对方还会看到吗)

  • 华为p40视频聊天可以开美颜吗(华为P40视频聊天怎么关闭美颜)

    华为p40视频聊天可以开美颜吗(华为P40视频聊天怎么关闭美颜)

  • 华为mate30pro视频聊天如何开美颜

    华为mate30pro视频聊天如何开美颜

  • 抖音怎么看历史评论(抖音怎么看历史直播回放)

    抖音怎么看历史评论(抖音怎么看历史直播回放)

  • 制作芯片的机器叫什么(制作芯片的机器设备有哪些?)

    制作芯片的机器叫什么(制作芯片的机器设备有哪些?)

  • 95066半夜打电话干嘛(95066半夜打电话问是否安全达到)

    95066半夜打电话干嘛(95066半夜打电话问是否安全达到)

  • 拼多多生鲜不支持退货(拼多多生鲜不支持七天退货吗)

    拼多多生鲜不支持退货(拼多多生鲜不支持七天退货吗)

  • 电脑显示激活windows什么意思(电脑显示激活windows转到设置以激活windows)

    电脑显示激活windows什么意思(电脑显示激活windows转到设置以激活windows)

  • 猫的灯怎么闪才算正常(猫的灯怎么闪才亮)

    猫的灯怎么闪才算正常(猫的灯怎么闪才亮)

  • 抖音直播卖东西规则(抖音直播卖东西需要什么条件)

    抖音直播卖东西规则(抖音直播卖东西需要什么条件)

  • 手机如何充电才能保证电池使用最长久(手机如何充电才耐用)

    手机如何充电才能保证电池使用最长久(手机如何充电才耐用)

  • 手机电池显示蓝色是什么原因(手机显示电池异常是什么原因)

    手机电池显示蓝色是什么原因(手机显示电池异常是什么原因)

  • 苹果5sa1528是什么版(苹果5sa1518是什么版本)

    苹果5sa1528是什么版(苹果5sa1518是什么版本)

  • 键盘大于号怎么打出来(键盘大于号怎么打不出来)

    键盘大于号怎么打出来(键盘大于号怎么打不出来)

  • 苹果11双摄像头旁边的孔有啥用(苹果11双摄像头用法)

    苹果11双摄像头旁边的孔有啥用(苹果11双摄像头用法)

  • 华为手机怎么开启双卡(华为手机怎么开启5g)

    华为手机怎么开启双卡(华为手机怎么开启5g)

  • 小米9pro怎么升级miui11(小米9pro怎么升级moui14)

    小米9pro怎么升级miui11(小米9pro怎么升级moui14)

  • 潮汐app是怎么使用(潮汐app是干嘛的)

    潮汐app是怎么使用(潮汐app是干嘛的)

  • 苹果人脸识别怎么设置(苹果人脸识别怎么设置两个人)

    苹果人脸识别怎么设置(苹果人脸识别怎么设置两个人)

  • 如何更改网页显示字体大小(更改网页设置)

    如何更改网页显示字体大小(更改网页设置)

  • 关闭芒果tv话费连续包月(话费订的芒果tv,怎么关闭自动续费)

    关闭芒果tv话费连续包月(话费订的芒果tv,怎么关闭自动续费)

  • ChatGPT使用案例之图像生成(chattr)

    ChatGPT使用案例之图像生成(chattr)

  • 应交增值税一般纳税人的账怎么做
  • 一般纳税人销售旧货
  • 明股实债的风险与防范
  • 赠送商品如何做账
  • 可供出售金融资产和长期股权投资
  • 计提减值准备是什么凭证
  • 个人所得税纳税义务人
  • 电子税务局自然人如何注册
  • 处置投资性房地产的损益怎么算
  • 劳务费确认收入
  • 农产品代销合同协议书范本
  • 设备税款
  • 发票报销哪些能用专票
  • 未缴纳个人所得税承诺书模板
  • 公司产品中请别人开发的软件怎么会计处理?
  • 增值税发票对方已认证怎么冲红
  • 股权转让 分期付款
  • 金税盘忘记清卡了
  • 公司解散实收资本会计怎么处理
  • 企业预缴多交税了如何申请退税
  • 可供出售金融资产属于流动资产吗
  • 特殊性税务处理弥补亏损限额
  • 劳务费和服务费一样吗
  • win7如何隐藏任务栏正在游戏的图标
  • 个税退手续费怎么申请
  • 无形资产入账摊销
  • 笔记本电脑bios设置
  • 销售折扣收货方法有哪些
  • 在windows7操作具有
  • win10如何给文件夹上锁
  • php的教程
  • 长期挂账的其他应付款转营业外收入情况说明
  • 多开票金额会计分录
  • 外贸公司出口退税率是多少
  • 挂靠公司收费几个点
  • 基于用户的协同过滤算法
  • 前端按钮跳转界面
  • 广告系统源码
  • 税盘显示已反写
  • 缴纳的印花税怎么入账
  • 计提和发放工资金额不一致
  • 赔偿客户款应该怎么记账
  • 资金结存属于资产科目吗
  • access 模糊匹配
  • 商品流通企业的进货费用
  • 银行存款余额调节表编制
  • 材料发票税额
  • 其他应收款科目核算哪些业务
  • 应税消费品含税吗
  • 增值税一般纳税人资格登记表
  • 员工拿发票报销怎么做账
  • 为什么预付账款是资产
  • 未交增值税的核算方法
  • 固定资产的特点有哪几个
  • 签合同前的协议叫什么
  • solaris 2020
  • bios cmos设置
  • win7系统锁屏密码
  • 如何解决孩子多动
  • csinject.exe是什么程序的进程 csinject进程是安全的吗
  • mac与windows的使用区别
  • win7z
  • linux安装迅雷
  • linux使用rar命令压缩文件
  • win7为什么会出现小黄锁
  • linux将文本写入文件
  • linux安装glibc.i686
  • shell替换文件中指定行的指定内容
  • shell脚本 -ne 0
  • 自动断开网络共享怎么办
  • vue list清空
  • 无法加载odbc驱动程序
  • node.js的安装方法
  • jquery可以实现哪些效果
  • jquery教程实例
  • 人力资源差额发票
  • 长沙个体户怎么给员工交社保
  • 江之都财税服务集团有限公司地址
  • 个人所得税税单去哪里打印
  • 烟叶税是谁交
  • 免责声明:网站部分图片文字素材来源于网络,如有侵权,请及时告知,我们会第一时间删除,谢谢! 邮箱:opceo@qq.com

    鄂ICP备2023003026号

    网站地图: 企业信息 工商信息 财税知识 网络常识 编程技术

    友情链接: 武汉网站建设