摘要
https://arxiv.org/pdf/2007.07247.pdf
结合多个摄像机视图进行检测可以减轻拥挤场景中遮挡的影响。在多视点检测系统中,我们需要回答两个重要问题。首先,我们应该如何聚合来自多个视角的线索?第二,我们应该如何从空间上相邻的位置聚合信息?为了解决这些问题,我们引入了一种新型的多视点检测器MVDet。在多视图聚合期间,对于地面上的每个位置,现有方法使用多视图锚盒特征作为表示,这可能会限制性能,因为预定义的锚盒可能不准确。相比之下,通过特征映射透视变换,MVDet采用无锚点表示,直接从多个视图的相应像素中采样特征向量。对于空间聚合,不同于以往需要在神经网络之外进行设计和操作的方法,MVDet采用全卷积方法,在多视图聚合特征图上使用大卷积核。该模型是端到端可学习的,在Wildtrack数据集上达到了88.2%的MODA,比最先进的模型高出14.1%。我们还在新引入的合成数据集MultiviewX上提供了MVDet的详细分析,该数据集允许我们控制遮挡的水平。代码和MultiviewX数据集可从https://github.com/hou-yz/MVDet获得。 结合多个摄像机视图