位置: IT常识 - 正文

openCV实践项目:拖拽虚拟方块(opencv项目开发实战)

编辑:rootadmin
openCV实践项目:拖拽虚拟方块 一、项目效果:

推荐整理分享openCV实践项目:拖拽虚拟方块(opencv项目开发实战),希望有所帮助,仅作参考,欢迎阅读内容。

文章相关热门搜索词:opencv编程案例详解,opencv实验总结,opencv三大经典项目实战,opencv三大经典项目实战,opencv实验总结,opencv实战项目,opencv实验总结,opencv实验总结,内容如对您有帮助,希望把文章链接给更多的朋友!

学校宿舍今天搬家,累麻了,突然发现展示处理的也很粗糙,就这样吧嘿嘿~~~

二、核心流程:

1、openCV读取视频流、在每一帧图片上画一个矩形。

2、使用mediapipe获取手指关键点坐标。

3、根据手指坐标位置和矩形的坐标位置,判断手指点是否在矩形上,如果在则矩形跟随手指移动。

三、代码流程:环境准备:python: 3.8.8opencv: 4.2.0.32mediapipe: 0.8.10.1

注:

openCV实践项目:拖拽虚拟方块(opencv项目开发实战)

1、opencv版本过高或过低可能出现一些如摄像头打不开、闪退等问题,python版本影响opencv可选择的版本。

2、pip install mediapipe 后可能导致openCV无法正常使用,卸了重新下载,习惯了就好。

1. 读取摄像头视频,画矩形:import cv2import timeimport numpy as np# 调用摄像头 0 默认摄像头 cap = cv2.VideoCapture(0)# 初始方块数据x = 100y = 100w = 100h = 100# 读取一帧帧照片while True: # 返回frame图片 rec,frame = cap.read() # 镜像 frame = cv2.flip(frame,1) # 画矩形 cv2.rectangle(frame, (x, y), (x + w, y + h), (255, 0, 255), -1) # 显示画面 cv2.imshow('frame',frame) # 退出条件 if cv2.waitKey(1) & 0xFF == ord('q'): breakcap.release()cv2.destroyAllWindows()

这是很基础的一步操作,此时我们运行这段代码,摄像头打开,我们会惊讶地看到自己英俊的脸庞,且左上角有个100*100的紫色矩形。

2. 导入mediapipe处理手指坐标pip install mediapipe

此时可能出现一些问题,比如openCV突然用不了了,没关系,卸载了重新下。

mediapipe详细信息:Hands - mediapipe (google.github.io)

简单来说,它会返回给我们21个手指关键点的坐标,即它在视频画面的位置比例( 0~1 ),我们乘以对应画面的宽高,就能得到手指对应的坐标了。

本次用到食指和中指指尖,也就是8号和12号。

2.1 配置一些基础信息:import cv2import timeimport numpy as npimport mediapipe as mpmp_drawing = mp.solutions.drawing_utilsmp_drawing_styles = mp.solutions.drawing_stylesmp_hands = mp.solutions.handshands = mp_hands.Hands( static_image_mode=True, max_num_hands=2, min_detection_confidence=0.5)2.2 在处理每一帧图像时,加入: frame.flags.writeable = False frame = cv2.cvtColor(frame, cv2.COLOR_BGR2RGB) # 返回结果 results = hands.process(frame) frame.flags.writeable = True frame = cv2.cvtColor(frame, cv2.COLOR_RGB2BGR)

当我们在视频流中读取每一帧图片时,将其从BGR转为RGB供给mediapipe生成的hands对象读取,它会返回这张图片中手指关键点的信息,我们只需要继续对其作画,画在每一帧图片上。

# 如果结果不为空 if results.multi_hand_landmarks: # 遍历双手(根据读取顺序,一只只手遍历、画画) for hand_landmarks in results.multi_hand_landmarks: mp_drawing.draw_landmarks( frame, hand_landmarks, mp_hands.HAND_CONNECTIONS, mp_drawing_styles.get_default_hand_landmarks_style(), mp_drawing_styles.get_default_hand_connections_style())2.3 至此步骤完整代码import cv2import timeimport numpy as npimport mediapipe as mpmp_drawing = mp.solutions.drawing_utilsmp_drawing_styles = mp.solutions.drawing_stylesmp_hands = mp.solutions.handshands = mp_hands.Hands( static_image_mode=True, max_num_hands=2, min_detection_confidence=0.5)# 调用摄像头 0 默认摄像头 cap = cv2.VideoCapture(0)# 方块初始数组x = 100y = 100w = 100h = 100# 读取一帧帧照片while True: # 返回frame图片 rec,frame = cap.read() # 镜像 frame = cv2.flip(frame,1) frame.flags.writeable = False frame = cv2.cvtColor(frame, cv2.COLOR_BGR2RGB) # 返回结果 results = hands.process(frame) frame.flags.writeable = True frame = cv2.cvtColor(frame, cv2.COLOR_RGB2BGR) # 如果结果不为空 if results.multi_hand_landmarks: # 遍历双手(根据读取顺序,一只只手遍历、画画) # results.multi_hand_landmarks n双手 # hand_landmarks 每只手上21个点信息 for hand_landmarks in results.multi_hand_landmarks: mp_drawing.draw_landmarks( frame, hand_landmarks, mp_hands.HAND_CONNECTIONS, mp_drawing_styles.get_default_hand_landmarks_style(), mp_drawing_styles.get_default_hand_connections_style()) # 画矩形 cv2.rectangle(frame, (x, y), (x + w, y + h), (255, 0, 255), -1) # 显示画面 cv2.imshow('frame',frame) # 退出条件 if cv2.waitKey(1) & 0xFF == ord('q'): breakcap.release()cv2.destroyAllWindows()

此时我们运行看一下还挺有意思的:

3. 位置计算

我们这个实验要求拖动方块,那肯定也有不拖动的时候,因此不妨根据上一步获取食指(8)和中指(12)指尖的位置,如果这俩离得近,我们就在他与方块重合的时候,根据手指的位置改变方块的坐标。

完整代码:

import cv2import timeimport mathimport numpy as npimport mediapipe as mp# mediapipe配置mp_drawing = mp.solutions.drawing_utilsmp_drawing_styles = mp.solutions.drawing_stylesmp_hands = mp.solutions.handshands = mp_hands.Hands( static_image_mode=True, max_num_hands=2, min_detection_confidence=0.5)# 调用摄像头 0 默认摄像头 cap = cv2.VideoCapture(0)# cv2.namedWindow("frame", 0)# cv2.resizeWindow("frame", 960, 640)# 获取画面宽度、高度width = int(cap.get(cv2.CAP_PROP_FRAME_WIDTH))height = int(cap.get(cv2.CAP_PROP_FRAME_HEIGHT))# 方块初始数组x = 100y = 100w = 100h = 100L1 = 0L2 = 0on_square = Falsesquare_color = (0, 255, 0)# 读取一帧帧照片while True: # 返回frame图片 rec,frame = cap.read() # 镜像 frame = cv2.flip(frame,1) frame.flags.writeable = False frame = cv2.cvtColor(frame, cv2.COLOR_BGR2RGB) # 返回结果 results = hands.process(frame) frame.flags.writeable = True frame = cv2.cvtColor(frame, cv2.COLOR_RGB2BGR) # 如果结果不为空 if results.multi_hand_landmarks: # 遍历双手(根据读取顺序,一只只手遍历、画画) # results.multi_hand_landmarks n双手 # hand_landmarks 每只手上21个点信息 for hand_landmarks in results.multi_hand_landmarks: mp_drawing.draw_landmarks( frame, hand_landmarks, mp_hands.HAND_CONNECTIONS, mp_drawing_styles.get_default_hand_landmarks_style(), mp_drawing_styles.get_default_hand_connections_style()) # 记录手指每个点的x y 坐标 x_list = [] y_list = [] for landmark in hand_landmarks.landmark: x_list.append(landmark.x) y_list.append(landmark.y) # 获取食指指尖 index_finger_x, index_finger_y = int(x_list[8] * width),int(y_list[8] * height) # 获取中指 middle_finger_x,middle_finger_y = int(x_list[12] * width), int(y_list[12] * height) # 计算两指尖距离 finger_distance = math.hypot((middle_finger_x - index_finger_x), (middle_finger_y - index_finger_y)) # 如果双指合并(两之间距离近) if finger_distance < 60: # X坐标范围 Y坐标范围 if (index_finger_x > x and index_finger_x < (x + w)) and ( index_finger_y > y and index_finger_y < (y + h)): if on_square == False: L1 = index_finger_x - x L2 = index_finger_y - y square_color = (255, 0, 255) on_square = True else: # 双指不合并/分开 on_square = False square_color = (0, 255, 0) # 更新坐标 if on_square: x = index_finger_x - L1 y = index_finger_y - L2 # 图像融合 使方块不遮挡视频图片 overlay = frame.copy() cv2.rectangle(frame, (x, y), (x + w, y + h), square_color, -1) frame = cv2.addWeighted(overlay, 0.5, frame, 1 - 0.5, 0) # 显示画面 cv2.imshow('frame',frame) # 退出条件 if cv2.waitKey(1) & 0xFF == ord('q'): breakcap.release()cv2.destroyAllWindows()
本文链接地址:https://www.jiuchutong.com/zhishi/298672.html 转载请保留说明!

上一篇:微服务 Spring Boot Mybatis-Plus 整合 EasyPOI 实现 Excel 一对多 导入(微服务springboot结构)

下一篇:保姆级教程:Ant Design Vue中 a-table 嵌套子表格(保姆级教程什么意思)

  • 小米蓝牙耳机如何配对苹果手机(小米蓝牙耳机如何调节音量大小)

    小米蓝牙耳机如何配对苹果手机(小米蓝牙耳机如何调节音量大小)

  • 小键盘开关是哪个(小键盘开关是哪个键ipad)

    小键盘开关是哪个(小键盘开关是哪个键ipad)

  • 微信支付指纹如何修改(微信支付指纹如何录入)

    微信支付指纹如何修改(微信支付指纹如何录入)

  • 苹果x人脸识偏高偏低(苹果x人脸识别经常失灵)

    苹果x人脸识偏高偏低(苹果x人脸识别经常失灵)

  • 快手改昵称说已被注册(快手改名称为什么总是出现已注册了)

    快手改昵称说已被注册(快手改名称为什么总是出现已注册了)

  • 华为荣耀20Pro手机长曝光怎么设置(华为荣耀20pro手机参数配置)

    华为荣耀20Pro手机长曝光怎么设置(华为荣耀20pro手机参数配置)

  • 三相四线断路器怎么接(三相四线断路器怎么接线)

    三相四线断路器怎么接(三相四线断路器怎么接线)

  • iPhone11建议升级吗(iPhone11建议升级15.7吗)

    iPhone11建议升级吗(iPhone11建议升级15.7吗)

  • 快手申请退款多久能到账(快手申请退款多长时间能退回)

    快手申请退款多久能到账(快手申请退款多长时间能退回)

  • 演示文稿和幻灯片的区别是什么(演示文稿幻灯片有哪四种视图模式)

    演示文稿和幻灯片的区别是什么(演示文稿幻灯片有哪四种视图模式)

  • 不要挂机正在通话中什么意思

    不要挂机正在通话中什么意思

  • 中国移动无服务怎么恢复(中国移动无服务怎么联系客服)

    中国移动无服务怎么恢复(中国移动无服务怎么联系客服)

  • 抖音用昵称搜不到人(抖音用昵称搜不到用户)

    抖音用昵称搜不到人(抖音用昵称搜不到用户)

  • 微信解封手机号异常什么意思(微信解封手机号填错了多久能取消)

    微信解封手机号异常什么意思(微信解封手机号填错了多久能取消)

  • 开过情侣空间有记录吗(开过情侣空间有什么好处)

    开过情侣空间有记录吗(开过情侣空间有什么好处)

  • 华为拍照怎么变正方形(华为拍照怎么变成文档)

    华为拍照怎么变正方形(华为拍照怎么变成文档)

  • ppt如何制作模板(ppt怎么制作模板图片)

    ppt如何制作模板(ppt怎么制作模板图片)

  • 爱奇艺怎么制作视频专题(爱奇艺怎么制作视频)

    爱奇艺怎么制作视频专题(爱奇艺怎么制作视频)

  • 苹果手机怎么防蹭热点(苹果手机怎么防止丢失)

    苹果手机怎么防蹭热点(苹果手机怎么防止丢失)

  • 被拉到亲情号怎么退出(亲情号会被拉黑吗)

    被拉到亲情号怎么退出(亲情号会被拉黑吗)

  • qqsvip9要多少成长值(svip9qq多少钱)

    qqsvip9要多少成长值(svip9qq多少钱)

  • 苹果抖音怎么上传音乐(苹果抖音怎么上传自己的音乐)

    苹果抖音怎么上传音乐(苹果抖音怎么上传自己的音乐)

  • TransUnet官方代码测试自己的数据集(已训练完毕)(transit code)

    TransUnet官方代码测试自己的数据集(已训练完毕)(transit code)

  • 企业所得税应补退税额怎么计算
  • 配件和修理费能一起用吗
  • 对外支付代扣代缴增值税
  • 电梯广告租赁属于哪类
  • 企业季度报什么税
  • 土地补偿款收入要交什么税
  • 受托加工物资产包括哪些
  • 银行转账短信提醒还要收费吗
  • 土地出让金抵减销项税如何申报
  • 发票冲销后还能用吗
  • 今年补缴去年的税汇算清缴吗
  • 拓展培训费如何开票
  • 新企业所得税法规定的企业包括
  • 空调折旧年限的最新规定2018
  • 企业资产类科目的是
  • 个体户租房交房怎么交税
  • 企业交纳房产税,土地使用税、车船使用税应借记( )账户
  • 处理固定资产账务处理税率
  • 小规模减免增值税政策
  • 小程序交易需要什么条件
  • 物业公司哪些收费项目
  • 事业单位本年度工作小结
  • 工商年检填写数据填错了会罚款吗
  • 物业公司的水电工工作职责
  • 企业当期产生的外币报表折算差额
  • PHP:Memcached::getByKey()的用法_Memcached类
  • php数组函数,选班长
  • replace.exe进程
  • 报废机器设备如何缴纳增值税
  • 无效借款合同自被确认为无效之日起无效
  • 施工单位代建收费标准
  • 排灯节起源
  • php session_start
  • php gd库
  • 在沙滩上的语句
  • 待抵扣进项税额什么意思
  • 配置nginx支持php
  • 车辆购置税发票在哪里打印
  • 申请专利费用计入哪个科目
  • lstm crf
  • 人工智能rl
  • 待转销销项税额是什么
  • 对公账户走账是怎么回事
  • 用于应酬用的烟有哪些
  • 公司缴个人所得税吗
  • wordpress site
  • 定额备用金制度报销时用什么科目
  • 收到生育津贴入什么科目
  • 无偿提供建筑服务缴纳增值税
  • 进项税额有留底税额吗
  • 企业所得税的营业收入包括营业外收入吗
  • mysql命令行工具是什么
  • 什么情况下企业亏损但继续生产
  • 财务报表与分析outcome2
  • 办理注销税务登记的流程和资料
  • 红冲发票重开一定要一样的金额吗?
  • 新冠捐款捐物新闻
  • 确认借款无法收款怎么办
  • 印花税计入相关资产成本吗
  • 固定资产更新改造当月是否计提折旧
  • sqlserver索引类型区别
  • win7系统怎么运行xp系统的软件
  • win7系统环境变量无法编辑怎么办
  • winxp任务管理器在哪
  • centos lftp
  • win7系统系统
  • win10预览版最新
  • centos hosts
  • linux小技巧
  • javascript中的document.write
  • jquery右击事件
  • 刚接触 python 如何快速上手?
  • 很好的资源学习入口_android
  • jquery的checked
  • Python虚拟环境创建
  • java中的多态性
  • jquery操作文本可以使用什么方法
  • jq设置下拉框的值
  • 领导对税收分析肯定性批示
  • 黄金消费税如何征收
  • 免责声明:网站部分图片文字素材来源于网络,如有侵权,请及时告知,我们会第一时间删除,谢谢! 邮箱:opceo@qq.com

    鄂ICP备2023003026号

    网站地图: 企业信息 工商信息 财税知识 网络常识 编程技术

    友情链接: 武汉网站建设