初级选手实战 | Python 实现虚拟世界物品拖拽

哈喽,大家好。

今天给大家用 Python 实现虚拟物品拖拽,先预告一下下次的主题:跟大家分享了用手势控制电脑音量~记得先关注我

下面,讲解下实现思路,并附上核心代码

1. 用opencv读取人手

需要大家安装opencv-python,安装后执行以下代码,启动摄像头

cap = cv2.VideoCapture(0)

0代表系统默认摄像头。

用 opencv 在视频流中创建方块

cv2.rectangle(overlay, (x, y), (x + self.rect_width, y + self.rect_width), (255, 0, 0), -1)

2. 获取食指坐标

使用medialpipe识别人手

import mediapipe as mp
self.mp_drawing = mp.solutions.drawing_utils

# 识别手掌
results = hands.process(self.image)
for hand_landmarks in results.multi_hand_landmarks:
  landmark_list = []
  # 存储手掌关键点坐标
  for landmark_id, finger_axis in enumerate(hand_landmarks.landmark):
    landmark_list.append([landmark_id, finger_axis.x, finger_axis.y,finger_axis.z])

获取食指xyz坐标。

# 食指坐标
index_finger_tip = landmark_list[8]
index_finger_tip_x = ratio_x_to_pixel(index_finger_tip[1])
index_finger_tip_y = ratio_y_to_pixel(index_finger_tip[2])
index_finger_tip_z = index_finger_tip[3]

3. 判断人手是否在方框内

def check_overlay(self, check_x, check_y, check_z):
  x = self.rect_left_x  # 方框的左上角x坐标
  y = self.rect_left_y  # 方框的左上角y坐标

  if (x < check_x < (x + self.rect_width)) and (y < check_y < (y + self.rect_width))\
        and check_z < -0.10:
        return True

  return False

如果手指位于方框内,并且距离摄像头的距离小于 -0.1,则代表手指按下方框,此时手指移动后,更新方框的坐标,就可以实现方框跟随手指移动。

如果方框距离摄像头大于 -0.1,则代表手指释放方框,此时手指移动,方框不再跟随移动。

如果本篇文章对你有帮助,点个 收藏 吧。

想了解更多Python知识,或者想要初学者练习资料的,可以加下我下面这个微信~没错,我就是一个热爱分享的代码人~

 

你可能感兴趣的:(python)