2019年12月30日 · We propose a single-stage Human-Object Interaction (HOI) detection method that has outperformed all existing methods on HICO-DET dataset at 37 fps on a single Titan XP GPU. It is the first real-time HOI detection method.

在PPDM中，HOI被定义为一个point triplet<human point,interaction point,object point>，其中human point和object point是检测框的中心，interaction point是human point和object point的中点。 PPDM包含了两个并行分支，也就是 点检测分支 和 点匹配分支。 其中点检测 分支预测 是三个点，点匹配分支预测从interaction point到对应的human point和 object point的偏移。 如果human point和object point是来自同一个interaction point，则认为它们是匹配的。

2020年3月11日 · PPDM for human-centric relationship segmentation. The code was tested on Ubuntu 16.04, with Python 3.6 and PyTorch v0.4.1. Clone this repository. Install pytorch0.4.1. Install the requirements. Compile deformable convolutional (from DCNv2). Download HICO-Det datasets. Organize them in Dataset folder as follows:

Our PPDM-DLA outperforms the state-of-the-art methods with the inference speed of 37fps (0.027s). It is the first real-time HOI detection method. Our PPDM-Hourglass achieves 4.27% mAP improvement over the state-of-the-arts with a faster speed. Given an image, HOI detection aims to detect the triplet < human, interaction, object >.

2020年7月13日 · 本文提出了一种 并行 点检测与点匹配（PPDM）的HOI检测框架。 在PPDM中，HOI被定义为一个点三元组<人的点，交互点，物体点>。 人与物体点是检测box的中心，交互点是人与物体点的中心点。 PPDM包含两个并行分支，即点检测分支和点匹配分支。 点检测分支预测三个点。 同时，点匹配分支预测从交互点到对应的人和物体点的两个位移。 将来自同一交互点的人体点和物体点视为匹配对。 在并行体系结构中，交互点隐含地为人体和物体检测提供上下 …

在CVPR2020上，商汤团队联合北京航空航天大学Colab（可乐实验室）提出了基于并行点检测和点匹配的单阶段HOI Detection方法，为学术界首次在HOI Detection领域达到实时性能的深度学习算法，并且在公开数据集HICO-DE…

2024年10月31日 · 本文介绍了北京航空航天大学徐迈教授课题组最新发表于 IEEE Transactions on Pattern Analysis and Machine Intelligence (TPAMI 2024)上的工作“DeepM2CDL: Deep Multi - scale M... 车辆在道路上可能会遇到无数的障碍 物，而且事先记录下它们以训练一个 检测 器是不可能的。 相反，我们选择图像块，并使用周围的道路纹理进行填充，这倾向于从这些块中移除障碍 物。 然后，我们使用一个训练有素的网络来识别原始块和填充后的块之间的差异，这标志着 …

2024年4月10日 · We formulate HOI as a point triplet $< $ human point, interaction point, object point $> $ and design a Parallel Point Detection and Matching (PPDM) framework. We further take advantage of two-stage methods and propose a novel framework, PPDM++, that detects the interactive human-object pairs by PPDM, then extracts region features for each pair ...

首先，HOI任务的目标是检测出图片上物体的位置和物体之间的关系，可以说这是一个基于 object detection 的high level的动作理解任务。一个最直接，同时也是之前工作普遍采用的方式是所谓的两阶段（two-stage）模型，在第一阶段用object detection model检测出人和物体的 ...

2020年9月13日 · 在PPDM中，HOI被定义为一个point triplet<human point,interaction point,object point>，其中human point和object point是检测框的中心，interaction point是human point和object point的中点。 PPDM包含了两个并行分支，也就是 点检测分支 和 点匹配分支。 其中点检测分支预测是三个点，点匹配分支预测从interaction point到对应的human point和 object point的偏移。 如果human point和object point是来自同一个interaction point，则认为它们是匹配的。