3d指向检测 ros_3d_pointing_detection

叁歲伎倆 2022-10-12 12:15 74阅读 0赞

![94d30ad2fdd7a9db63a5af9429936da8.png][]

#  Introduction #

The workflow of this project is:

1.  Detect **2D human joints** from *color image* by **Openpose**.
2.  Compute **3D human joints** from 2D joints and *depth image*.
3.  Detect target objects by **YOLO**.
4.  If the right arm is fully stretched, then the person is doing a "pointing" action. (The arm is stretched if the angle between the upper arm and forearm is smaller than the threshold.)
5.  The pointing direction(ray) is defined as the vector from shoulder to wrist.
6.  The 3D pixel that is in front of the wrist and is very close to the pointing ray is where the person is pointing to.
7.  Backproject this 3D pixel to 2D image. If this 2D pixel is in one of the objects' bounding boxes, then we know the person is pointing to that object! Done!
8.

[https://github.com/felixchenfy/ros\_3d\_pointing\_detection][https_github.com_felixchenfy_ros_3d_pointing_detection]

依赖项 openpose 3d版

[https://github.com/felixchenfy/ros\_openpose\_rgbd][https_github.com_felixchenfy_ros_openpose_rgbd]

[94d30ad2fdd7a9db63a5af9429936da8.png]: /images/20221005/22d5afd7a7b14cb4a6844e87326c4c0f.png
[https_github.com_felixchenfy_ros_3d_pointing_detection]: https://github.com/felixchenfy/ros_3d_pointing_detection
[https_github.com_felixchenfy_ros_openpose_rgbd]: https://github.com/felixchenfy/ros_openpose_rgbd

发表评论取消回复

表情：

评论列表（有 0 条评论，74人围观）

还没有评论，来说两句吧...

相关阅读

相关 3D移动translate3d（CSS3）

3D移动translate3d（CSS3） <!DOCTYPE html> <html lang="en"> <head>

叁歲伎倆/ 2023年10月03日 13:39/ 0 赞/ 97 阅读

相关 ROS--3重要术语

ROS: 表示整个机器人开发生态，提供共享库，消息解析，功能包管理，丰富开发和调试工具等。主节点(Ros Master)：负责节点到节点的链接和消息通

灰太狼/ 2023年06月23日 13:28/ 0 赞/ 37 阅读

相关 3d指向检测 ros_3d_pointing_detection

![94d30ad2fdd7a9db63a5af9429936da8.png][] Introduction The workflow of this projec

叁歲伎倆/ 2022年10月12日 12:15/ 0 赞/ 75 阅读

相关 unity3d 屏幕触摸检测事件

屏幕上的触摸检测一般会检测点击，滑动，长按等 TouchPhase Enumeration Describes phase of a finger touch.

短命女/ 2022年09月30日 15:42/ 0 赞/ 357 阅读

相关 CSS3 2D/3D转换

Internet Explorer 10、Firefox 以及 Opera 支持 transform 属性。 Chrome 和 Safari 需要前缀 -webkit-。

分手后的思念是犯贱/ 2022年09月21日 05:36/ 0 赞/ 365 阅读

相关 3D 池化（MaxPool3D）和 3D（Conv3d）卷积详解

3D 池化（MaxPool3D）和 3D（Conv3d）卷积详解池化和卷积的过程是类似的，只是池化没有权重，相比起来更容易说明计算的过程。这里从 3D 池化开始详细

冷不防/ 2022年09月11日 02:25/ 0 赞/ 962 阅读

相关 delta3d碰撞检测BUG及修复

我在上传我做的这个源码之前，我在自己的程序中遇到一个BUG，但我发现delta3d也出现同样的错误，因此先解决delta3d本身的BUG：l 在delta3d中将

╰+攻爆jí腚メ/ 2022年08月06日 13:09/ 0 赞/ 222 阅读

相关 unity3D 射线检测

在开发中，尤其是跟模型与交互的时候，都会用到射线检测，这篇文章给大家分享一些射线检测的方法实现。射线：射线是3D世界中一个点向一个方向发射的一条无终点的线，在发射轨迹中与其

川长思鸟来/ 2022年05月25日 03:10/ 0 赞/ 288 阅读

相关 D3DXCreateTeapot,D3DXCreateSphere,D3DXCreateTorus,D3DXCreateCylinder函数参数图解

![70][] ![70 1][] [70]: /images/20220522/537e90478faf439f9eb84a247fdf62d5.png [70

秒速五厘米/ 2022年05月22日 08:11/ 0 赞/ 425 阅读

相关 3D-3D:ICP

3D-3D:ICP 1. ICP算法 2. SVD方法 3.非线性优化方法 1. ICP算法 2D-2D问题是通过已知的2D图像坐标点对来求解图

素颜马尾好姑娘i/ 2022年03月12日 02:52/ 0 赞/ 436 阅读