位置: IT常识 - 正文

openCV实践项目:拖拽虚拟方块(opencv项目开发实战)

编辑:rootadmin
openCV实践项目:拖拽虚拟方块 一、项目效果:

推荐整理分享openCV实践项目:拖拽虚拟方块(opencv项目开发实战),希望有所帮助,仅作参考,欢迎阅读内容。

文章相关热门搜索词:opencv编程案例详解,opencv实验总结,opencv三大经典项目实战,opencv三大经典项目实战,opencv实验总结,opencv实战项目,opencv实验总结,opencv实验总结,内容如对您有帮助,希望把文章链接给更多的朋友!

学校宿舍今天搬家,累麻了,突然发现展示处理的也很粗糙,就这样吧嘿嘿~~~

二、核心流程:

1、openCV读取视频流、在每一帧图片上画一个矩形。

2、使用mediapipe获取手指关键点坐标。

3、根据手指坐标位置和矩形的坐标位置,判断手指点是否在矩形上,如果在则矩形跟随手指移动。

三、代码流程:环境准备:python: 3.8.8opencv: 4.2.0.32mediapipe: 0.8.10.1

注:

openCV实践项目:拖拽虚拟方块(opencv项目开发实战)

1、opencv版本过高或过低可能出现一些如摄像头打不开、闪退等问题,python版本影响opencv可选择的版本。

2、pip install mediapipe 后可能导致openCV无法正常使用,卸了重新下载,习惯了就好。

1. 读取摄像头视频,画矩形:import cv2import timeimport numpy as np# 调用摄像头 0 默认摄像头 cap = cv2.VideoCapture(0)# 初始方块数据x = 100y = 100w = 100h = 100# 读取一帧帧照片while True: # 返回frame图片 rec,frame = cap.read() # 镜像 frame = cv2.flip(frame,1) # 画矩形 cv2.rectangle(frame, (x, y), (x + w, y + h), (255, 0, 255), -1) # 显示画面 cv2.imshow('frame',frame) # 退出条件 if cv2.waitKey(1) & 0xFF == ord('q'): breakcap.release()cv2.destroyAllWindows()

这是很基础的一步操作,此时我们运行这段代码,摄像头打开,我们会惊讶地看到自己英俊的脸庞,且左上角有个100*100的紫色矩形。

2. 导入mediapipe处理手指坐标pip install mediapipe

此时可能出现一些问题,比如openCV突然用不了了,没关系,卸载了重新下。

mediapipe详细信息:Hands - mediapipe (google.github.io)

简单来说,它会返回给我们21个手指关键点的坐标,即它在视频画面的位置比例( 0~1 ),我们乘以对应画面的宽高,就能得到手指对应的坐标了。

本次用到食指和中指指尖,也就是8号和12号。

2.1 配置一些基础信息:import cv2import timeimport numpy as npimport mediapipe as mpmp_drawing = mp.solutions.drawing_utilsmp_drawing_styles = mp.solutions.drawing_stylesmp_hands = mp.solutions.handshands = mp_hands.Hands( static_image_mode=True, max_num_hands=2, min_detection_confidence=0.5)2.2 在处理每一帧图像时,加入: frame.flags.writeable = False frame = cv2.cvtColor(frame, cv2.COLOR_BGR2RGB) # 返回结果 results = hands.process(frame) frame.flags.writeable = True frame = cv2.cvtColor(frame, cv2.COLOR_RGB2BGR)

当我们在视频流中读取每一帧图片时,将其从BGR转为RGB供给mediapipe生成的hands对象读取,它会返回这张图片中手指关键点的信息,我们只需要继续对其作画,画在每一帧图片上。

# 如果结果不为空 if results.multi_hand_landmarks: # 遍历双手(根据读取顺序,一只只手遍历、画画) for hand_landmarks in results.multi_hand_landmarks: mp_drawing.draw_landmarks( frame, hand_landmarks, mp_hands.HAND_CONNECTIONS, mp_drawing_styles.get_default_hand_landmarks_style(), mp_drawing_styles.get_default_hand_connections_style())2.3 至此步骤完整代码import cv2import timeimport numpy as npimport mediapipe as mpmp_drawing = mp.solutions.drawing_utilsmp_drawing_styles = mp.solutions.drawing_stylesmp_hands = mp.solutions.handshands = mp_hands.Hands( static_image_mode=True, max_num_hands=2, min_detection_confidence=0.5)# 调用摄像头 0 默认摄像头 cap = cv2.VideoCapture(0)# 方块初始数组x = 100y = 100w = 100h = 100# 读取一帧帧照片while True: # 返回frame图片 rec,frame = cap.read() # 镜像 frame = cv2.flip(frame,1) frame.flags.writeable = False frame = cv2.cvtColor(frame, cv2.COLOR_BGR2RGB) # 返回结果 results = hands.process(frame) frame.flags.writeable = True frame = cv2.cvtColor(frame, cv2.COLOR_RGB2BGR) # 如果结果不为空 if results.multi_hand_landmarks: # 遍历双手(根据读取顺序,一只只手遍历、画画) # results.multi_hand_landmarks n双手 # hand_landmarks 每只手上21个点信息 for hand_landmarks in results.multi_hand_landmarks: mp_drawing.draw_landmarks( frame, hand_landmarks, mp_hands.HAND_CONNECTIONS, mp_drawing_styles.get_default_hand_landmarks_style(), mp_drawing_styles.get_default_hand_connections_style()) # 画矩形 cv2.rectangle(frame, (x, y), (x + w, y + h), (255, 0, 255), -1) # 显示画面 cv2.imshow('frame',frame) # 退出条件 if cv2.waitKey(1) & 0xFF == ord('q'): breakcap.release()cv2.destroyAllWindows()

此时我们运行看一下还挺有意思的:

3. 位置计算

我们这个实验要求拖动方块,那肯定也有不拖动的时候,因此不妨根据上一步获取食指(8)和中指(12)指尖的位置,如果这俩离得近,我们就在他与方块重合的时候,根据手指的位置改变方块的坐标。

完整代码:

import cv2import timeimport mathimport numpy as npimport mediapipe as mp# mediapipe配置mp_drawing = mp.solutions.drawing_utilsmp_drawing_styles = mp.solutions.drawing_stylesmp_hands = mp.solutions.handshands = mp_hands.Hands( static_image_mode=True, max_num_hands=2, min_detection_confidence=0.5)# 调用摄像头 0 默认摄像头 cap = cv2.VideoCapture(0)# cv2.namedWindow("frame", 0)# cv2.resizeWindow("frame", 960, 640)# 获取画面宽度、高度width = int(cap.get(cv2.CAP_PROP_FRAME_WIDTH))height = int(cap.get(cv2.CAP_PROP_FRAME_HEIGHT))# 方块初始数组x = 100y = 100w = 100h = 100L1 = 0L2 = 0on_square = Falsesquare_color = (0, 255, 0)# 读取一帧帧照片while True: # 返回frame图片 rec,frame = cap.read() # 镜像 frame = cv2.flip(frame,1) frame.flags.writeable = False frame = cv2.cvtColor(frame, cv2.COLOR_BGR2RGB) # 返回结果 results = hands.process(frame) frame.flags.writeable = True frame = cv2.cvtColor(frame, cv2.COLOR_RGB2BGR) # 如果结果不为空 if results.multi_hand_landmarks: # 遍历双手(根据读取顺序,一只只手遍历、画画) # results.multi_hand_landmarks n双手 # hand_landmarks 每只手上21个点信息 for hand_landmarks in results.multi_hand_landmarks: mp_drawing.draw_landmarks( frame, hand_landmarks, mp_hands.HAND_CONNECTIONS, mp_drawing_styles.get_default_hand_landmarks_style(), mp_drawing_styles.get_default_hand_connections_style()) # 记录手指每个点的x y 坐标 x_list = [] y_list = [] for landmark in hand_landmarks.landmark: x_list.append(landmark.x) y_list.append(landmark.y) # 获取食指指尖 index_finger_x, index_finger_y = int(x_list[8] * width),int(y_list[8] * height) # 获取中指 middle_finger_x,middle_finger_y = int(x_list[12] * width), int(y_list[12] * height) # 计算两指尖距离 finger_distance = math.hypot((middle_finger_x - index_finger_x), (middle_finger_y - index_finger_y)) # 如果双指合并(两之间距离近) if finger_distance < 60: # X坐标范围 Y坐标范围 if (index_finger_x > x and index_finger_x < (x + w)) and ( index_finger_y > y and index_finger_y < (y + h)): if on_square == False: L1 = index_finger_x - x L2 = index_finger_y - y square_color = (255, 0, 255) on_square = True else: # 双指不合并/分开 on_square = False square_color = (0, 255, 0) # 更新坐标 if on_square: x = index_finger_x - L1 y = index_finger_y - L2 # 图像融合 使方块不遮挡视频图片 overlay = frame.copy() cv2.rectangle(frame, (x, y), (x + w, y + h), square_color, -1) frame = cv2.addWeighted(overlay, 0.5, frame, 1 - 0.5, 0) # 显示画面 cv2.imshow('frame',frame) # 退出条件 if cv2.waitKey(1) & 0xFF == ord('q'): breakcap.release()cv2.destroyAllWindows()
本文链接地址:https://www.jiuchutong.com/zhishi/298672.html 转载请保留说明!

上一篇:微服务 Spring Boot Mybatis-Plus 整合 EasyPOI 实现 Excel 一对多 导入(微服务springboot结构)

下一篇:保姆级教程:Ant Design Vue中 a-table 嵌套子表格(保姆级教程什么意思)

  • SEO未来的发展趋势和前景(seo发展方向)

    SEO未来的发展趋势和前景(seo发展方向)

  • vue.set()用法(vue.set和this.$set)

    vue.set()用法(vue.set和this.$set)

  • 荣耀X30max在哪里调时间(荣耀x30max手机最新消息2021)

    荣耀X30max在哪里调时间(荣耀x30max手机最新消息2021)

  • 微信朋友圈如何屏蔽部分人(微信朋友圈如何设置不让别人看)

    微信朋友圈如何屏蔽部分人(微信朋友圈如何设置不让别人看)

  • 淘宝直播购物车在哪(淘宝直播购物车链接怎么弄)

    淘宝直播购物车在哪(淘宝直播购物车链接怎么弄)

  • 手机彩信能发多大的视频(手机彩信最多发多大)

    手机彩信能发多大的视频(手机彩信最多发多大)

  • 华为权益版手机是什么意思(华为权益手机壳选错了颜色怎么办)

    华为权益版手机是什么意思(华为权益手机壳选错了颜色怎么办)

  • 小米滑板车充电器绿灯(小米滑板车充电口在哪里)

    小米滑板车充电器绿灯(小米滑板车充电口在哪里)

  • 华为p40支持哪些解锁方式(华为p40支持哪些瓦数的充电器)

    华为p40支持哪些解锁方式(华为p40支持哪些瓦数的充电器)

  • nx541j什么型号(nx541j参数)

    nx541j什么型号(nx541j参数)

  • 蓝牙打印机连接不上(蓝牙打印机连接不上电脑)

    蓝牙打印机连接不上(蓝牙打印机连接不上电脑)

  • 12306注册审核需要多久(在12306注册后需要到窗口审核吗)

    12306注册审核需要多久(在12306注册后需要到窗口审核吗)

  • 路由器光猫是什么(路由器的光猫是什么意思)

    路由器光猫是什么(路由器的光猫是什么意思)

  • 苹果手表5代和4代区别(苹果手表5代和4代参数对比)

    苹果手表5代和4代区别(苹果手表5代和4代参数对比)

  • airpodspro美版和国行区别(airpodspro美版和国行序列号)

    airpodspro美版和国行区别(airpodspro美版和国行序列号)

  • AirPods Pro怎么重置(airpods pro怎么重启)

    AirPods Pro怎么重置(airpods pro怎么重启)

  • 摄像头内存卡怎么放(摄像头内存卡怎么清理内存)

    摄像头内存卡怎么放(摄像头内存卡怎么清理内存)

  • 苹果11pro和11pro max的区别(苹果11pro和11pro max手机壳一样吗)

    苹果11pro和11pro max的区别(苹果11pro和11pro max手机壳一样吗)

  • 如何注销学信网账号(如何注销学信网信息)

    如何注销学信网账号(如何注销学信网信息)

  • 腾讯会员怎么两个人用(腾讯会员怎么两个手机用一个会员)

    腾讯会员怎么两个人用(腾讯会员怎么两个手机用一个会员)

  • 华为mate9双卡双待怎么用(华为mate9双卡双待怎么设置)

    华为mate9双卡双待怎么用(华为mate9双卡双待怎么设置)

  • qq小耳朵是什么意思(qq上的小耳朵是什么)

    qq小耳朵是什么意思(qq上的小耳朵是什么)

  • 微信怎么翻译英文(微信怎么翻译英语发送)

    微信怎么翻译英文(微信怎么翻译英语发送)

  • 在快速启动中不再显示最近使用的文件(要求快速启动)

    在快速启动中不再显示最近使用的文件(要求快速启动)

  • 小规模纳税人销售农产品税率是多少
  • 建筑劳务公司怎么做账
  • 计提应交个人所得税分录怎么做
  • 企业所得税汇算清缴时间
  • 一般纳税人主表第一栏数据
  • 资产几百亿真的有那么多钱吗?
  • 建筑公司核定征收所得税怎么算
  • 城建税和教育附加税
  • 购销合同印花税优惠政策
  • 合伙企业应纳税所得额公式是什么
  • 事业单位结转结余科目
  • 长期挂账应付款的审计
  • 堤围内的土地性质
  • 个人所得税个税申报流程
  • 赞助费属于赠与关系吗
  • 手撕发票的税点是多少
  • 销售设备并安装
  • 公司发生的业务可以转让给子公司嘛?
  • 去除页眉的横线快捷方式
  • 缴纳当月增值税30000元
  • 已经计提工资后怎么做账
  • php echo \n
  • 筹建期银行手续费
  • 增值税价外费用是什么意思
  • 若依框架好用吗
  • kjournald是什么进程
  • php array_map 和 foreach性能
  • php imagecopymerge
  • 出国考察是什么意思
  • php导出表格
  • 会计处理的正确顺序
  • ci框架中新建的控制器取不到session
  • 流动资产金额
  • openapi官网
  • php如何使用
  • discuz安装使用教程
  • 权益法下股权投资转让
  • 使用筷子就餐会不会传染乙肝病毒
  • 汇算清缴管理费用明细有哪些
  • 固定资产转为投资性房地产公允价值
  • 增值税申报系统登录密码
  • 公司注销税款太多
  • 帝国cms使用手册
  • 删除mysql57服务
  • 资产减值准备是资产的备抵科目吗
  • 当事人对付款时间没有约定或者约定不明的
  • 主营业务成本为什么属于损益类科目
  • 未分配利润可以用于企业经营吗
  • 固定资产清理借方增加还是减少
  • 公司注销财务账本怎么处理
  • 背书转让为什么记应收票据
  • 加计抵减10%政策适用范围
  • 招待费汇算清缴一定要调整的吗
  • 原始凭证基本要求是什么
  • mysql+php
  • win10预览版退回正式版
  • 七喜r11c笔记本
  • uphclean.exe - uphclean进程是什么意思
  • win10怎么关闭定时断网功能
  • win8启用或关闭windows功能
  • Yosemite使用技巧 如何使用Yosemite mac信息功能共享电脑屏幕教程
  • xp直升win7
  • proflwiz.exe - proflwiz是什么进程 有什么用
  • windows1021h2更新
  • 微软撤回快捷键
  • 在linux系统中
  • 怎么设置永久禁止下载拼多多
  • win10交接wifi
  • linux中安装软件可使用哪些方式
  • WIN7系统的镜像文件在哪里
  • linux4个主要部分
  • 用python抓取网页数据的代码
  • python time模块日期运算
  • unity 120帧
  • 如何彻底删除android
  • 动态生成script
  • android电话簿
  • 辽宁省社保系统操作
  • 中药生产与加工和中药制药技术区别
  • 公司零申报可以交社保吗
  • 免责声明:网站部分图片文字素材来源于网络,如有侵权,请及时告知,我们会第一时间删除,谢谢! 邮箱:opceo@qq.com

    鄂ICP备2023003026号

    网站地图: 企业信息 工商信息 财税知识 网络常识 编程技术

    友情链接: 武汉网站建设