SonarVoxNet: Diver Detection in 3D Bounding Box using 3D Sonar
En palabras de los autores
Autonomous underwater vehicles (AUVs) assisting human divers must continuously track not only the diver's 3D position but also their full-body orientation. However, vision-based perception is unreliable underwater, and forward-looking sonar -- despite being widely used -- discards the elevation information needed for orientation estimation, posing a fundamental limitation. Recently commercialized 3D sonar preserves elevation but produces sparse, noisy returns, and existing detectors are built for dense LiDAR data and for targets that remain upright and rotate only about the yaw axis (e.g., vehicles, pedestrians), making them unable to represent a freely pitching and rolling diver. To address this gap, we present two contributions. First, SonarVoxNet adapts a voxel-based encoder and an anchor-free center-based detection head to 3D sonar data, replacing the conventional yaw-only rotation representation with a continuous 6D rotation parameterization to predict full 9-DoF oriented bounding boxes -- to our knowledge, the first 3D sonar diver detector to do so. Second, Diver3D is the first public 3D sonar dataset with full 3D orientation labels for divers in diverse, non-upright poses, collected at a natural cave-diving site. Through controlled ablations over the backbone and detection head, we show that the dominant factor behind accurate 3D sonar-based diver detection is the transition from yaw-only rotation to full-SO(3) rotation. This transition substantially improves detection accuracy and reduces orientation error. These results demonstrate that full-body diver orientation is recoverable from 3D sonar alone, laying the groundwork for future work on diver pose estimation and diver-robot interaction.
En palabras simples Resumen con IA
Los vehículos submarinos autónomos necesitan rastrear dónde están los buzos y hacia dónde apuntan sus cuerpos. Las cámaras funcionan mal bajo el agua, y el sonar regular pierde el ángulo vertical necesario para saber la inclinación del cuerpo. El sonar 3D nuevo conserva este ángulo pero da datos dispersos y ruidosos, y las herramientas existentes solo manejan objetos erguidos. Los autores construyeron SonarVoxNet, que adapta métodos existentes al sonar 3D y rastrea buzos en cualquier posición corporal. También crearon Diver3D, el primer conjunto de datos público de imágenes de sonar 3D que muestra buzos en poses variadas con etiquetas de orientación completa. Las pruebas mostraron que permitir rotación completa en lugar de solo giro izquierda-derecha mejora mucho la detección y reduce el error de orientación. Los resultados sugieren que el sonar 3D solo puede recuperar la orientación corporal completa, permitiendo trabajo futuro sobre pose de buzos e interacción con robots.
Escrito por Kimi K2.5 usando solo el abstract de arriba. Jev verificó que cada oración esté respaldada por las oraciones del abstract que cita y eliminó las que no. Pasá el cursor por una oración para ver de dónde sale.
Apareció: viernes, 2 de octubre. arXiv. Preprint, todavía sin revisión por pares.