发帖
雷达卡
时间可以是二维的？基于二维时间图的视频内容片段检测
我们常常将物理世界定义为三维空间，将时间定义为一维空间。但是，这不是唯一的定义方式。最近，微软亚洲研究院大开脑洞，提出了一种新的时间表示方式，将时间定义成了二维的。
在二维空间中，我们定义其中一个维度表示时间的开始时刻，另外一个维度表示时间的结束时刻；从而，二维空间中的每一个坐标点就可以表达一个时间片段（例如，从 A 时刻开始到 B 时刻结束的时间片），也可以是一个特定的时间点（例如，从 A 时刻开到 A 时刻结束，即为 A 时刻）。
这种二维时间定义方式，可以为时序信息处理问题提供一种新的建模思路，例如视频、语音、轨迹等时序信息的分析与处理。近期，他们已将这种新的时间表达方式，应用于视频内容理解中，并在视频内人体动作检测、视频内容片段定位任务中取得了优异的性能。值得一提的是，他们应用这种新的时间表达方式，结合最新的深度学习模型，在视频行为识别与检测竞赛（HACS Temporal Action Localization Challenge）中取得了第1名的成绩。
相关技术细节将发表于 AAAI 2020 论文“Learning 2D Temporal Adjacent Network for Moment Localization with Natural Language”。
京公网安备 11010802022788号
