Un método para la calibración de un sistema LiDAR y cámara fisheye

Abstract

[Resumen] El uso de sistemas de percepción que combinan sensores LiDAR y cámaras se está haciendo cada vez más frecuente, pues la fusión de sus datos proporciona una ayuda para la percepción del entorno. Además, las tareas de detección de objetos o la segmentación semántica del entorno precisan, frecuentemente, la combinación de sensores de diferente naturaleza con el objetivo de mejorar sus resultados. La calibración de estos sistemas es un paso fundamental para la correcta fusión de los datos. En este artículo se propone un método de calibración basado en un patrón para este tipo de sistemas, formados por una cámara fisheye y un LiDAR. El método evita transformar las imágenes a un modelo pin-hole, realizando una calibración a partir de la proyección esférica de la imagen, obtenida mediante los parámetros de calibración y la nube de puntos correspondiente.

[Abstract] The usage of LiDAR and camera systems is increasing rapidly, since the fusion of their information may provide a better undestanding of the environment. In particular, the correct fusion of the data provided by both sensor types allows to improve the results in terms of object detection or semantic segmentation. The calibration of these systems is crucial for the correct fusion of data. This article proposes a target-based calibration method for such systems, formed by a LiDAR and a fisheye camera. The method avoids transforming the images to a pin-hole camera model, performing a calibration based on the spherical projection of the image, obtained with the calibration parameters and the corresponding point cloud.