位置: IT常识 - 正文

openCV实践项目:拖拽虚拟方块(opencv项目开发实战)

编辑:rootadmin
openCV实践项目:拖拽虚拟方块 一、项目效果:

推荐整理分享openCV实践项目:拖拽虚拟方块(opencv项目开发实战),希望有所帮助,仅作参考,欢迎阅读内容。

文章相关热门搜索词:opencv编程案例详解,opencv实验总结,opencv三大经典项目实战,opencv三大经典项目实战,opencv实验总结,opencv实战项目,opencv实验总结,opencv实验总结,内容如对您有帮助,希望把文章链接给更多的朋友!

学校宿舍今天搬家,累麻了,突然发现展示处理的也很粗糙,就这样吧嘿嘿~~~

二、核心流程:

1、openCV读取视频流、在每一帧图片上画一个矩形。

2、使用mediapipe获取手指关键点坐标。

3、根据手指坐标位置和矩形的坐标位置,判断手指点是否在矩形上,如果在则矩形跟随手指移动。

三、代码流程:环境准备:python: 3.8.8opencv: 4.2.0.32mediapipe: 0.8.10.1

注:

openCV实践项目:拖拽虚拟方块(opencv项目开发实战)

1、opencv版本过高或过低可能出现一些如摄像头打不开、闪退等问题,python版本影响opencv可选择的版本。

2、pip install mediapipe 后可能导致openCV无法正常使用,卸了重新下载,习惯了就好。

1. 读取摄像头视频,画矩形:import cv2import timeimport numpy as np# 调用摄像头 0 默认摄像头 cap = cv2.VideoCapture(0)# 初始方块数据x = 100y = 100w = 100h = 100# 读取一帧帧照片while True: # 返回frame图片 rec,frame = cap.read() # 镜像 frame = cv2.flip(frame,1) # 画矩形 cv2.rectangle(frame, (x, y), (x + w, y + h), (255, 0, 255), -1) # 显示画面 cv2.imshow('frame',frame) # 退出条件 if cv2.waitKey(1) & 0xFF == ord('q'): breakcap.release()cv2.destroyAllWindows()

这是很基础的一步操作,此时我们运行这段代码,摄像头打开,我们会惊讶地看到自己英俊的脸庞,且左上角有个100*100的紫色矩形。

2. 导入mediapipe处理手指坐标pip install mediapipe

此时可能出现一些问题,比如openCV突然用不了了,没关系,卸载了重新下。

mediapipe详细信息:Hands - mediapipe (google.github.io)

简单来说,它会返回给我们21个手指关键点的坐标,即它在视频画面的位置比例( 0~1 ),我们乘以对应画面的宽高,就能得到手指对应的坐标了。

本次用到食指和中指指尖,也就是8号和12号。

2.1 配置一些基础信息:import cv2import timeimport numpy as npimport mediapipe as mpmp_drawing = mp.solutions.drawing_utilsmp_drawing_styles = mp.solutions.drawing_stylesmp_hands = mp.solutions.handshands = mp_hands.Hands( static_image_mode=True, max_num_hands=2, min_detection_confidence=0.5)2.2 在处理每一帧图像时,加入: frame.flags.writeable = False frame = cv2.cvtColor(frame, cv2.COLOR_BGR2RGB) # 返回结果 results = hands.process(frame) frame.flags.writeable = True frame = cv2.cvtColor(frame, cv2.COLOR_RGB2BGR)

当我们在视频流中读取每一帧图片时,将其从BGR转为RGB供给mediapipe生成的hands对象读取,它会返回这张图片中手指关键点的信息,我们只需要继续对其作画,画在每一帧图片上。

# 如果结果不为空 if results.multi_hand_landmarks: # 遍历双手(根据读取顺序,一只只手遍历、画画) for hand_landmarks in results.multi_hand_landmarks: mp_drawing.draw_landmarks( frame, hand_landmarks, mp_hands.HAND_CONNECTIONS, mp_drawing_styles.get_default_hand_landmarks_style(), mp_drawing_styles.get_default_hand_connections_style())2.3 至此步骤完整代码import cv2import timeimport numpy as npimport mediapipe as mpmp_drawing = mp.solutions.drawing_utilsmp_drawing_styles = mp.solutions.drawing_stylesmp_hands = mp.solutions.handshands = mp_hands.Hands( static_image_mode=True, max_num_hands=2, min_detection_confidence=0.5)# 调用摄像头 0 默认摄像头 cap = cv2.VideoCapture(0)# 方块初始数组x = 100y = 100w = 100h = 100# 读取一帧帧照片while True: # 返回frame图片 rec,frame = cap.read() # 镜像 frame = cv2.flip(frame,1) frame.flags.writeable = False frame = cv2.cvtColor(frame, cv2.COLOR_BGR2RGB) # 返回结果 results = hands.process(frame) frame.flags.writeable = True frame = cv2.cvtColor(frame, cv2.COLOR_RGB2BGR) # 如果结果不为空 if results.multi_hand_landmarks: # 遍历双手(根据读取顺序,一只只手遍历、画画) # results.multi_hand_landmarks n双手 # hand_landmarks 每只手上21个点信息 for hand_landmarks in results.multi_hand_landmarks: mp_drawing.draw_landmarks( frame, hand_landmarks, mp_hands.HAND_CONNECTIONS, mp_drawing_styles.get_default_hand_landmarks_style(), mp_drawing_styles.get_default_hand_connections_style()) # 画矩形 cv2.rectangle(frame, (x, y), (x + w, y + h), (255, 0, 255), -1) # 显示画面 cv2.imshow('frame',frame) # 退出条件 if cv2.waitKey(1) & 0xFF == ord('q'): breakcap.release()cv2.destroyAllWindows()

此时我们运行看一下还挺有意思的:

3. 位置计算

我们这个实验要求拖动方块,那肯定也有不拖动的时候,因此不妨根据上一步获取食指(8)和中指(12)指尖的位置,如果这俩离得近,我们就在他与方块重合的时候,根据手指的位置改变方块的坐标。

完整代码:

import cv2import timeimport mathimport numpy as npimport mediapipe as mp# mediapipe配置mp_drawing = mp.solutions.drawing_utilsmp_drawing_styles = mp.solutions.drawing_stylesmp_hands = mp.solutions.handshands = mp_hands.Hands( static_image_mode=True, max_num_hands=2, min_detection_confidence=0.5)# 调用摄像头 0 默认摄像头 cap = cv2.VideoCapture(0)# cv2.namedWindow("frame", 0)# cv2.resizeWindow("frame", 960, 640)# 获取画面宽度、高度width = int(cap.get(cv2.CAP_PROP_FRAME_WIDTH))height = int(cap.get(cv2.CAP_PROP_FRAME_HEIGHT))# 方块初始数组x = 100y = 100w = 100h = 100L1 = 0L2 = 0on_square = Falsesquare_color = (0, 255, 0)# 读取一帧帧照片while True: # 返回frame图片 rec,frame = cap.read() # 镜像 frame = cv2.flip(frame,1) frame.flags.writeable = False frame = cv2.cvtColor(frame, cv2.COLOR_BGR2RGB) # 返回结果 results = hands.process(frame) frame.flags.writeable = True frame = cv2.cvtColor(frame, cv2.COLOR_RGB2BGR) # 如果结果不为空 if results.multi_hand_landmarks: # 遍历双手(根据读取顺序,一只只手遍历、画画) # results.multi_hand_landmarks n双手 # hand_landmarks 每只手上21个点信息 for hand_landmarks in results.multi_hand_landmarks: mp_drawing.draw_landmarks( frame, hand_landmarks, mp_hands.HAND_CONNECTIONS, mp_drawing_styles.get_default_hand_landmarks_style(), mp_drawing_styles.get_default_hand_connections_style()) # 记录手指每个点的x y 坐标 x_list = [] y_list = [] for landmark in hand_landmarks.landmark: x_list.append(landmark.x) y_list.append(landmark.y) # 获取食指指尖 index_finger_x, index_finger_y = int(x_list[8] * width),int(y_list[8] * height) # 获取中指 middle_finger_x,middle_finger_y = int(x_list[12] * width), int(y_list[12] * height) # 计算两指尖距离 finger_distance = math.hypot((middle_finger_x - index_finger_x), (middle_finger_y - index_finger_y)) # 如果双指合并(两之间距离近) if finger_distance < 60: # X坐标范围 Y坐标范围 if (index_finger_x > x and index_finger_x < (x + w)) and ( index_finger_y > y and index_finger_y < (y + h)): if on_square == False: L1 = index_finger_x - x L2 = index_finger_y - y square_color = (255, 0, 255) on_square = True else: # 双指不合并/分开 on_square = False square_color = (0, 255, 0) # 更新坐标 if on_square: x = index_finger_x - L1 y = index_finger_y - L2 # 图像融合 使方块不遮挡视频图片 overlay = frame.copy() cv2.rectangle(frame, (x, y), (x + w, y + h), square_color, -1) frame = cv2.addWeighted(overlay, 0.5, frame, 1 - 0.5, 0) # 显示画面 cv2.imshow('frame',frame) # 退出条件 if cv2.waitKey(1) & 0xFF == ord('q'): breakcap.release()cv2.destroyAllWindows()
本文链接地址:https://www.jiuchutong.com/zhishi/298672.html 转载请保留说明!

上一篇:微服务 Spring Boot Mybatis-Plus 整合 EasyPOI 实现 Excel 一对多 导入(微服务springboot结构)

下一篇:保姆级教程:Ant Design Vue中 a-table 嵌套子表格(保姆级教程什么意思)

  • 只有会议号怎么加入腾讯会议列表(只有会议号怎么添加会议列表)

    只有会议号怎么加入腾讯会议列表(只有会议号怎么添加会议列表)

  • 文件夹的两种含义(文件夹有哪两个意思)

    文件夹的两种含义(文件夹有哪两个意思)

  • 拼多多付款方式(拼多多付款方式怎么没有微信支付)

    拼多多付款方式(拼多多付款方式怎么没有微信支付)

  • 华为相册拼图在哪(华为相册拼图怎么拼图)

    华为相册拼图在哪(华为相册拼图怎么拼图)

  • 快手保存图片作者能看见吗(快手保存图片作者)

    快手保存图片作者能看见吗(快手保存图片作者)

  • 字幕与隐藏式字幕有什么用(字幕与隐藏式字幕怎么用)

    字幕与隐藏式字幕有什么用(字幕与隐藏式字幕怎么用)

  • 钉钉文件可以知道哪些人在看吗(钉钉文件知识库删除了对方还能看见吗)

    钉钉文件可以知道哪些人在看吗(钉钉文件知识库删除了对方还能看见吗)

  • 荣耀7x屏幕翘起来的维修方法(荣耀手机屏幕翘起来了怎么办)

    荣耀7x屏幕翘起来的维修方法(荣耀手机屏幕翘起来了怎么办)

  • 荣耀30pro的屏幕是哪家的(荣耀30pro的屏幕刷新率是多少hz)

    荣耀30pro的屏幕是哪家的(荣耀30pro的屏幕刷新率是多少hz)

  • qq关麦对方有提示吗(qq关麦为什么还有声)

    qq关麦对方有提示吗(qq关麦为什么还有声)

  • 文件夹为什么不能发送(文件夹为什么不能复制)

    文件夹为什么不能发送(文件夹为什么不能复制)

  • 拼多多红包助力最多能点多少次(拼多多红包助力网站)

    拼多多红包助力最多能点多少次(拼多多红包助力网站)

  • 苹果xr怎么下载两个微信(苹果XR怎么下载微信分身)

    苹果xr怎么下载两个微信(苹果XR怎么下载微信分身)

  • 钉钉如何两个群同时视频会议(钉钉如何两个群一块直播)

    钉钉如何两个群同时视频会议(钉钉如何两个群一块直播)

  • 横屏照片怎么变成竖屏(横屏照片怎么变成全屏)

    横屏照片怎么变成竖屏(横屏照片怎么变成全屏)

  • 运行器的功能是(运行器的功能是什么)

    运行器的功能是(运行器的功能是什么)

  • 哪款ipad有3dtouch(哪款ipad有面容)

    哪款ipad有3dtouch(哪款ipad有面容)

  • 小米同步是什么意思(小米同步功能有什么用)

    小米同步是什么意思(小米同步功能有什么用)

  • 屏幕分辨率越高越清晰吗(屏幕分辨率越高对显卡要求越高吗)

    屏幕分辨率越高越清晰吗(屏幕分辨率越高对显卡要求越高吗)

  • 微信清空后找不到群聊(微信清空后找不到群怎么办)

    微信清空后找不到群聊(微信清空后找不到群怎么办)

  • 拼多多今日满返在哪(拼多多满返活动有用吗)

    拼多多今日满返在哪(拼多多满返活动有用吗)

  • iphone11预购什么时候发货(苹果11预售)

    iphone11预购什么时候发货(苹果11预售)

  • 平板插卡插的是什么卡(平板插sim卡不能用是怎么回事)

    平板插卡插的是什么卡(平板插sim卡不能用是怎么回事)

  • 爱奇艺怎么投屏(爱奇艺怎么投屏不了)

    爱奇艺怎么投屏(爱奇艺怎么投屏不了)

  • iphonex支持红外遥控吗(iphone x支持红外遥控吗)

    iphonex支持红外遥控吗(iphone x支持红外遥控吗)

  • 擦除联系痕迹什么意思(擦除联系痕迹对方打电话可以收到吗)

    擦除联系痕迹什么意思(擦除联系痕迹对方打电话可以收到吗)

  • Win10 KB5004945怎么卸载? 删除KB5004945的两种方法(win10 kb5001567)

    Win10 KB5004945怎么卸载? 删除KB5004945的两种方法(win10 kb5001567)

  • windows11如何关闭和打开设备加密?win11关闭和打开设备加密的方法(windows11如何关闭病毒和威胁防护)

    windows11如何关闭和打开设备加密?win11关闭和打开设备加密的方法(windows11如何关闭病毒和威胁防护)

  • HTML【前端基础】(html前端技术)

    HTML【前端基础】(html前端技术)

  • route命令  显示与设置路由信息(route命令的作用)

    route命令 显示与设置路由信息(route命令的作用)

  • 进口货物增值税纳税人是谁
  • 增值税申报表出口退税
  • 小规模季度不超30万需要交什么税
  • 薪金性支出包括什么
  • 增值税专用发票和普通发票的区别
  • 先分后合是什么意思
  • 固定资产折旧年限
  • 货运代理公司会计涉及的科目
  • 增值税期末留抵税额的账务处理
  • 企业公车私用如何处理
  • 箱包类增值税发票多少点
  • 一次性奖金可以分2次发吗
  • 应纳所得税额除以收入等于什么
  • 对公账户钱怎么退回去
  • 离线发票在哪里查看
  • 取得抵债房产的涉税风险,你清楚吗?
  • 老板带员工出去吃饭
  • 应纳税所得额怎么理解
  • 公司采购商品支付货款未开票会计分录
  • 所得税申报填写
  • 旅游服务费如何入账
  • 计提本月城市维护建设税,教育费附加500元
  • 研发费用税前加计扣除
  • 预交土地增值税怎么计算的
  • 怎样清理ie
  • 先开票后发货怎么操作
  • 如何取消windows启动管理器
  • 公司交会费有什么用
  • mac option开机
  • 如何查看自己的qq密码
  • lsalss.exe
  • vue使用技巧
  • promise歌曲
  • JavaScript ,18种常用数组方法,快来看看你会吗?
  • php魔术方法autoload
  • 增值税发票已认证抵扣还可以进项税额转出吗
  • 帝国cms如何使用
  • 2022最好用的港澳台电视直播
  • 无形资产减值准备可以转回吗
  • 营业成本包含哪些项目
  • 成本法和权益法的相同点
  • 营改增后还有建筑业发票吗
  • 人工费没有发票怎么办
  • 代理出口业务会计分录
  • 期末结账账务处理
  • 用企业管理器创建一个备份设备
  • sql server中查看创建的数据库命令
  • 懒癌患者如何自救
  • 3种不用重装的手机
  • window 脚本
  • linux mv命令详解
  • sgrmbroker.exe是什么进程
  • win8截屏在哪个文件夹
  • mac输入特殊字符
  • linux挂载yum
  • 如何在linux
  • xp连接到共享打印机
  • macos教程
  • win1020h2镜像
  • 关机你的电脑遇到问题,需要重新启动,我们只收集
  • kmswin7激活步骤
  • 一文看懂linux内核
  • winbox app
  • Android OpenGL ES(七)----理解纹理与纹理过滤
  • JS实现的ajax和同源策略(实例讲解)
  • javaScript 事件绑定、事件冒泡、事件捕获和事件执行顺序整理总结
  • nodejs查找文件
  • Python爬取网易云一首歌的全部评论并进行分析
  • javascript代码写在哪个标签里
  • nodejs sleep方法
  • javascript val
  • ansible客户端需要装python
  • 修复硬盘
  • android获取手机的基本信息
  • jquery插件使用
  • js判断ua
  • 办完营业执照多久可以开抖音小店
  • 新加坡关税壁垒
  • 江苏税务个税查询
  • 从哪个国家进口牛肉
  • 免责声明:网站部分图片文字素材来源于网络,如有侵权,请及时告知,我们会第一时间删除,谢谢! 邮箱:opceo@qq.com

    鄂ICP备2023003026号

    网站地图: 企业信息 工商信息 财税知识 网络常识 编程技术

    友情链接: 武汉网站建设