位置: IT常识 - 正文

openCV实践项目:拖拽虚拟方块(opencv项目开发实战)

编辑:rootadmin
openCV实践项目:拖拽虚拟方块 一、项目效果:

推荐整理分享openCV实践项目:拖拽虚拟方块(opencv项目开发实战),希望有所帮助,仅作参考,欢迎阅读内容。

文章相关热门搜索词:opencv编程案例详解,opencv实验总结,opencv三大经典项目实战,opencv三大经典项目实战,opencv实验总结,opencv实战项目,opencv实验总结,opencv实验总结,内容如对您有帮助,希望把文章链接给更多的朋友!

学校宿舍今天搬家,累麻了,突然发现展示处理的也很粗糙,就这样吧嘿嘿~~~

二、核心流程:

1、openCV读取视频流、在每一帧图片上画一个矩形。

2、使用mediapipe获取手指关键点坐标。

3、根据手指坐标位置和矩形的坐标位置,判断手指点是否在矩形上,如果在则矩形跟随手指移动。

三、代码流程:环境准备:python: 3.8.8opencv: 4.2.0.32mediapipe: 0.8.10.1

注:

openCV实践项目:拖拽虚拟方块(opencv项目开发实战)

1、opencv版本过高或过低可能出现一些如摄像头打不开、闪退等问题,python版本影响opencv可选择的版本。

2、pip install mediapipe 后可能导致openCV无法正常使用,卸了重新下载,习惯了就好。

1. 读取摄像头视频,画矩形:import cv2import timeimport numpy as np# 调用摄像头 0 默认摄像头 cap = cv2.VideoCapture(0)# 初始方块数据x = 100y = 100w = 100h = 100# 读取一帧帧照片while True: # 返回frame图片 rec,frame = cap.read() # 镜像 frame = cv2.flip(frame,1) # 画矩形 cv2.rectangle(frame, (x, y), (x + w, y + h), (255, 0, 255), -1) # 显示画面 cv2.imshow('frame',frame) # 退出条件 if cv2.waitKey(1) & 0xFF == ord('q'): breakcap.release()cv2.destroyAllWindows()

这是很基础的一步操作,此时我们运行这段代码,摄像头打开,我们会惊讶地看到自己英俊的脸庞,且左上角有个100*100的紫色矩形。

2. 导入mediapipe处理手指坐标pip install mediapipe

此时可能出现一些问题,比如openCV突然用不了了,没关系,卸载了重新下。

mediapipe详细信息:Hands - mediapipe (google.github.io)

简单来说,它会返回给我们21个手指关键点的坐标,即它在视频画面的位置比例( 0~1 ),我们乘以对应画面的宽高,就能得到手指对应的坐标了。

本次用到食指和中指指尖,也就是8号和12号。

2.1 配置一些基础信息:import cv2import timeimport numpy as npimport mediapipe as mpmp_drawing = mp.solutions.drawing_utilsmp_drawing_styles = mp.solutions.drawing_stylesmp_hands = mp.solutions.handshands = mp_hands.Hands( static_image_mode=True, max_num_hands=2, min_detection_confidence=0.5)2.2 在处理每一帧图像时,加入: frame.flags.writeable = False frame = cv2.cvtColor(frame, cv2.COLOR_BGR2RGB) # 返回结果 results = hands.process(frame) frame.flags.writeable = True frame = cv2.cvtColor(frame, cv2.COLOR_RGB2BGR)

当我们在视频流中读取每一帧图片时,将其从BGR转为RGB供给mediapipe生成的hands对象读取,它会返回这张图片中手指关键点的信息,我们只需要继续对其作画,画在每一帧图片上。

# 如果结果不为空 if results.multi_hand_landmarks: # 遍历双手(根据读取顺序,一只只手遍历、画画) for hand_landmarks in results.multi_hand_landmarks: mp_drawing.draw_landmarks( frame, hand_landmarks, mp_hands.HAND_CONNECTIONS, mp_drawing_styles.get_default_hand_landmarks_style(), mp_drawing_styles.get_default_hand_connections_style())2.3 至此步骤完整代码import cv2import timeimport numpy as npimport mediapipe as mpmp_drawing = mp.solutions.drawing_utilsmp_drawing_styles = mp.solutions.drawing_stylesmp_hands = mp.solutions.handshands = mp_hands.Hands( static_image_mode=True, max_num_hands=2, min_detection_confidence=0.5)# 调用摄像头 0 默认摄像头 cap = cv2.VideoCapture(0)# 方块初始数组x = 100y = 100w = 100h = 100# 读取一帧帧照片while True: # 返回frame图片 rec,frame = cap.read() # 镜像 frame = cv2.flip(frame,1) frame.flags.writeable = False frame = cv2.cvtColor(frame, cv2.COLOR_BGR2RGB) # 返回结果 results = hands.process(frame) frame.flags.writeable = True frame = cv2.cvtColor(frame, cv2.COLOR_RGB2BGR) # 如果结果不为空 if results.multi_hand_landmarks: # 遍历双手(根据读取顺序,一只只手遍历、画画) # results.multi_hand_landmarks n双手 # hand_landmarks 每只手上21个点信息 for hand_landmarks in results.multi_hand_landmarks: mp_drawing.draw_landmarks( frame, hand_landmarks, mp_hands.HAND_CONNECTIONS, mp_drawing_styles.get_default_hand_landmarks_style(), mp_drawing_styles.get_default_hand_connections_style()) # 画矩形 cv2.rectangle(frame, (x, y), (x + w, y + h), (255, 0, 255), -1) # 显示画面 cv2.imshow('frame',frame) # 退出条件 if cv2.waitKey(1) & 0xFF == ord('q'): breakcap.release()cv2.destroyAllWindows()

此时我们运行看一下还挺有意思的:

3. 位置计算

我们这个实验要求拖动方块,那肯定也有不拖动的时候,因此不妨根据上一步获取食指(8)和中指(12)指尖的位置,如果这俩离得近,我们就在他与方块重合的时候,根据手指的位置改变方块的坐标。

完整代码:

import cv2import timeimport mathimport numpy as npimport mediapipe as mp# mediapipe配置mp_drawing = mp.solutions.drawing_utilsmp_drawing_styles = mp.solutions.drawing_stylesmp_hands = mp.solutions.handshands = mp_hands.Hands( static_image_mode=True, max_num_hands=2, min_detection_confidence=0.5)# 调用摄像头 0 默认摄像头 cap = cv2.VideoCapture(0)# cv2.namedWindow("frame", 0)# cv2.resizeWindow("frame", 960, 640)# 获取画面宽度、高度width = int(cap.get(cv2.CAP_PROP_FRAME_WIDTH))height = int(cap.get(cv2.CAP_PROP_FRAME_HEIGHT))# 方块初始数组x = 100y = 100w = 100h = 100L1 = 0L2 = 0on_square = Falsesquare_color = (0, 255, 0)# 读取一帧帧照片while True: # 返回frame图片 rec,frame = cap.read() # 镜像 frame = cv2.flip(frame,1) frame.flags.writeable = False frame = cv2.cvtColor(frame, cv2.COLOR_BGR2RGB) # 返回结果 results = hands.process(frame) frame.flags.writeable = True frame = cv2.cvtColor(frame, cv2.COLOR_RGB2BGR) # 如果结果不为空 if results.multi_hand_landmarks: # 遍历双手(根据读取顺序,一只只手遍历、画画) # results.multi_hand_landmarks n双手 # hand_landmarks 每只手上21个点信息 for hand_landmarks in results.multi_hand_landmarks: mp_drawing.draw_landmarks( frame, hand_landmarks, mp_hands.HAND_CONNECTIONS, mp_drawing_styles.get_default_hand_landmarks_style(), mp_drawing_styles.get_default_hand_connections_style()) # 记录手指每个点的x y 坐标 x_list = [] y_list = [] for landmark in hand_landmarks.landmark: x_list.append(landmark.x) y_list.append(landmark.y) # 获取食指指尖 index_finger_x, index_finger_y = int(x_list[8] * width),int(y_list[8] * height) # 获取中指 middle_finger_x,middle_finger_y = int(x_list[12] * width), int(y_list[12] * height) # 计算两指尖距离 finger_distance = math.hypot((middle_finger_x - index_finger_x), (middle_finger_y - index_finger_y)) # 如果双指合并(两之间距离近) if finger_distance < 60: # X坐标范围 Y坐标范围 if (index_finger_x > x and index_finger_x < (x + w)) and ( index_finger_y > y and index_finger_y < (y + h)): if on_square == False: L1 = index_finger_x - x L2 = index_finger_y - y square_color = (255, 0, 255) on_square = True else: # 双指不合并/分开 on_square = False square_color = (0, 255, 0) # 更新坐标 if on_square: x = index_finger_x - L1 y = index_finger_y - L2 # 图像融合 使方块不遮挡视频图片 overlay = frame.copy() cv2.rectangle(frame, (x, y), (x + w, y + h), square_color, -1) frame = cv2.addWeighted(overlay, 0.5, frame, 1 - 0.5, 0) # 显示画面 cv2.imshow('frame',frame) # 退出条件 if cv2.waitKey(1) & 0xFF == ord('q'): breakcap.release()cv2.destroyAllWindows()
本文链接地址:https://www.jiuchutong.com/zhishi/298672.html 转载请保留说明!

上一篇:微服务 Spring Boot Mybatis-Plus 整合 EasyPOI 实现 Excel 一对多 导入(微服务springboot结构)

下一篇:保姆级教程:Ant Design Vue中 a-table 嵌套子表格(保姆级教程什么意思)

  • word中文本框怎么设置无边框(word文本框里面文字怎么居中)

    word中文本框怎么设置无边框(word文本框里面文字怎么居中)

  • 华为手机轨迹记录在哪(华为手机轨迹记录软件)

    华为手机轨迹记录在哪(华为手机轨迹记录软件)

  • oppofindx2pro耳机孔在哪(oppofindx2pro耳机没声音)

    oppofindx2pro耳机孔在哪(oppofindx2pro耳机没声音)

  • qq聊天记录会被监视吗(qq聊天记录会被网络警察监控吗)

    qq聊天记录会被监视吗(qq聊天记录会被网络警察监控吗)

  • 为什么苹果蓝牙搜不到设备(为什么苹果蓝牙耳机连接不上)

    为什么苹果蓝牙搜不到设备(为什么苹果蓝牙耳机连接不上)

  • ipad黑屏但是有声音(ipad黑屏但是有亮光)

    ipad黑屏但是有声音(ipad黑屏但是有亮光)

  • 台式电脑喇叭没声音(台式电脑喇叭没声音耳机有声音)

    台式电脑喇叭没声音(台式电脑喇叭没声音耳机有声音)

  • 快手极速版不转圈了怎么办(快手极速版不转圈红包图标)

    快手极速版不转圈了怎么办(快手极速版不转圈红包图标)

  • 华为mate30手机上面有小圆怎么取消(华为mate30手机上方图标怎么关)

    华为mate30手机上面有小圆怎么取消(华为mate30手机上方图标怎么关)

  • 微信群扫码200人以后怎么还可以扫(微信群扫码进群200人数限制)

    微信群扫码200人以后怎么还可以扫(微信群扫码进群200人数限制)

  • 网易云会员过期后下载的歌曲不能听(网易云会员过期了下载的音乐还能听吗)

    网易云会员过期后下载的歌曲不能听(网易云会员过期了下载的音乐还能听吗)

  • 手机换屏后发热严重怎么办(手机换屏后发热严重)

    手机换屏后发热严重怎么办(手机换屏后发热严重)

  • 9800gtx相当于现在什么显卡

    9800gtx相当于现在什么显卡

  • 华为手机插u盘没反应(华为手机插u盘没反应怎样设置)

    华为手机插u盘没反应(华为手机插u盘没反应怎样设置)

  • 城域网传输速率范围(城域网传输速率比局域网)

    城域网传输速率范围(城域网传输速率比局域网)

  • 隐身访问听歌有记录吗(隐身访问听歌有播放量吗唱吧)

    隐身访问听歌有记录吗(隐身访问听歌有播放量吗唱吧)

  • 显示未知号码怎么解决(显示未知号码怎么没有拦截)

    显示未知号码怎么解决(显示未知号码怎么没有拦截)

  • 苹果手机电池最大容量怎么恢复(苹果手机电池最大容量多久掉1%正常)

    苹果手机电池最大容量怎么恢复(苹果手机电池最大容量多久掉1%正常)

  • 快手极速版是什么意思(快手极速版是什么时候上线的)

    快手极速版是什么意思(快手极速版是什么时候上线的)

  • tcp协议属于哪一层(TCP协议属于哪一个层次)

    tcp协议属于哪一层(TCP协议属于哪一个层次)

  • mpgt2ch a是ipad几代(ipadmpgt2ch/a什么版本)

    mpgt2ch a是ipad几代(ipadmpgt2ch/a什么版本)

  • 为什么我的微信在附近人里面显示不出来(为什么我的微信没有置顶)

    为什么我的微信在附近人里面显示不出来(为什么我的微信没有置顶)

  • 笔记本电脑u盘插哪个孔(笔记本电脑u盘启动设置)

    笔记本电脑u盘插哪个孔(笔记本电脑u盘启动设置)

  • 电脑一合上就唤醒不了(电脑一合上就关机该怎么办)

    电脑一合上就唤醒不了(电脑一合上就关机该怎么办)

  • 小米max2otg功能怎么开启

    小米max2otg功能怎么开启

  • 入门级单反和专业级单反的区别(入门级单反值得买吗)

    入门级单反和专业级单反的区别(入门级单反值得买吗)

  • windows未能正常启动怎么解决(windows未能正常启动)

    windows未能正常启动怎么解决(windows未能正常启动)

  • 【微信小程序】初入微信小程序(微信小程序在哪里打开)

    【微信小程序】初入微信小程序(微信小程序在哪里打开)

  • 行权税费
  • 增值税加计抵减政策10%和15%
  • 劳务报酬所得计税依据是否含增值税收入
  • 增值税纳税义务发生地点的规定
  • 维修费收入怎么结转成本
  • 开发票高校是企业还是非企业单位
  • 物业公司财务制度及核算方法
  • 计提坏账准备怎么理解
  • 外资企业享受什么优惠政策
  • 个人非专利技术转让属于什么收入
  • 汽车4s店索赔和维修
  • 合同印花税用不用计提
  • 所得税预缴申报表中营业成本怎么计算
  • 多层股权结构设计控制法
  • 国税和地税分别占多少
  • 简易征收电费能不能抵扣
  • 固定资产报废税费怎么处理
  • 购买税控盘的钱能全额抵扣增值税吗
  • 金税四期上线了吗?
  • 2020金税四期上线
  • 设计费计入成本
  • 六险一金指的是哪六险哪一金
  • 客户分批付款怎么说
  • win101703怎么看
  • 教育培训行业收入
  • 经济作物国家有什么补助吗
  • 资产报废对企业的好处
  • ajax获取php数据
  • 国有土地使用权租赁
  • 为什么系统弹出登录此网络
  • ps命令不可用
  • linux中断原理
  • 公司修好厂房老板怎么说
  • 存货盘盈盘亏影响当期利润吗
  • vue click触发两次
  • 兼职如何交税款
  • php 序列化函数
  • 工业企业成本核算的内容是
  • 初级农产品免税普票能否抵扣
  • 微信支付开发需要什么条件
  • 没有公网ip如何实现外网访问路由器
  • 雪花算法workid
  • php统计系统
  • ip6tables-restore命令 还原ip6tables表
  • 帝国cms8.0
  • 股票分红个人所得税
  • python文档怎么查看
  • 一般计税和简易计税可以合并征税吗
  • 计提和结转的例子
  • 承包经营所得适用比例税率
  • 店面收回转让费怎么办
  • 广告赞助支出能抵扣吗
  • 固定资产指的是几年度
  • 小规模季度超过45万了怎么缴纳
  • 发生的计提费用没有发生怎么办
  • 收不回来的问题
  • 小企业营业外收入包括
  • 印花税减免退回会计分录
  • 非营利医疗机构免征哪几种税
  • 企业货币资金主要包括哪些
  • mysql主从复制作用
  • mac支持的字体格式
  • win10h2版本
  • windows识别码
  • cocos2dx视频教程
  • 深入理解
  • python num怎么用
  • unity精灵编辑器
  • 常用dos命令大全及用法
  • nodejs全局异常监听
  • javascript的
  • vue2.x
  • jquery自定义表单
  • javascript面向过程
  • python djang
  • 国税网上办税大厅在哪
  • 北京西城税务局
  • 苏州市国家税务局稽查局李加云副局长
  • 武汉市江汉区财政局这个单位的公务员待遇怎么样?
  • 职称申报后附件打不开
  • 免责声明:网站部分图片文字素材来源于网络,如有侵权,请及时告知,我们会第一时间删除,谢谢! 邮箱:opceo@qq.com

    鄂ICP备2023003026号

    网站地图: 企业信息 工商信息 财税知识 网络常识 编程技术

    友情链接: 武汉网站建设