Maestría en Ingeniería · 2024
Slam y Groundtruth usando marcadores
The present thesis project focuses on the comparison of a visual SLAM method based on ArUco markers, using these markers for both the generation of the ground truth and the execution of SLAM. The research is carried out in the environment of EAFIT University. A marker is placed on top of the robot and a panoramic camera covering the entire area where the robot is located is used for the ground truth method. For the SLAM method, a camera located on the robot is used. During the experiments, markers are distributed around the perimeter of the study site. The camera integrated into the robot allows the detection of the perimeter markers. Initially, a map of the area is created using the ROS working environment, which is compared with real measurements for validation. Subsequently, the location of the robot is determined using both methods mentioned. The obtained data are compared to analyze the variance, as well as the mean squared error (MSE), root mean squared error (RMSE), and mean absolute error (MAE). Finally, conclusions are drawn about the effectiveness of implementing this visual SLAM method either as ground truth or on the robot itself. This study contributes to the advancement in understanding and applying simultaneous localization and mapping techniques in robotic environments using ArUco markers.
Full text 150 pages with text
Read the full thesis Record in the repository
Contents
- CONTENIDOp. 2
- ILUSTRACIONESp. 5
- ECUACIONESp. 9
- TABLASp. 10
- Introducciónp. 11
- Planteamiento del problemap. 15
- Objetivosp. 15
- Generalp. 15
- Específicosp. 15
- Estado del Artep. 16
- Groundtruthp. 16
- Groundtruth Evaluation of Large Urban 6D SLAM [36]p. 16
- Environments [43]p. 18
- High-accuracy Fiducial Markers for Groundtruth [44]p. 20
- Uso de ROS en la Aplicaciónp. 27
- ROS: an open-source Robot Operating System [59]p. 27
- Enabling Codesharing in Rescue Simulation with USARSim/ROS [62]p. 28
- Localization in Urban Environments [66]p. 29
- Embedded Mobile ROS Platform for SLAM Application with RGB-D Cameras [77]p. 32
- Tipos de Marcadoresp. 33
- Fiducial-tracking Augmented Reality [78]p. 34
- Analysis and Improvements in AprilTag Based State Estimation [84]p. 36
- Comparing ARTag and ARToolkit Plus Fiducial Marker Systems [94]p. 39
- Experimental Comparison of Fiducial Markers for Pose Estimation [95]p. 40
- ChromaTag: A Colored Marker and Fast Detection Algorithm [96]p. 43
- Uso de Marcadores ArUco en SLAMp. 47
- markers [97]p. 47
- A Robust Planar Marker-Based Visual SLAM [101]p. 49
- Mapping and localization from planar markers [35]p. 51
- An Improvement on ArUco Marker for Pose Tracking Using Kalman Filter [116]p. 55
- Uco-SLAM [31]p. 57
- Metodologíap. 60
- selección de groundtruthp. 60
- selección de marcadoresp. 63
- Computador, uso de ros, instalación, paquetesp. 63
- Configuración de ROSp. 64
- Entorno de trabajo del proyectop. 66
- Paquete ArUco_melodic_mappingp. 66
- Paquete Plataformap. 67
- Sensores a utilizarp. 68
- Robot a implementarp. 70
- Librería ArUcop. 72
- Arucos a implementar en el entornop. 77
- Lugar de experimentop. 78
- Droidcamp. 79
- Calibración de cámaras usando ROSp. 67
- Instalación de Paquetes Necesariosp. 82
- Activación del Entorno ROSp. 82
- Activación de Droidcam y Identificación de Dispositivop. 82
- Conexión con "camera_calibration"p. 83
- Calibración de la Cámarap. 83
- ArUco mapping implementado en ROSp. 84
- Documentosp. 84
- Lista de archivos JSONp. 85
- Lista de archivos Pythonp. 85
- Lista de archivos Rvizp. 86
- Funciones y códigosp. 86
- Funtions_to_slamp. 85
- GridMappingp. 97
- FuncToMappingp. 100
- A_mappingp. 85
- A_laserp. 85
- kobuki_real_world_posp. 85
- kobuki_world_posp. 85
- Configuración de RVIZp. 116
- Mapp. 118
- Markerp. 118
- Experimento y extracción de resultadosp. 122
- Experimentop. 122
- Root Mean Square Error (RMSE) - Error Cuadrático Mediop. 125
- Fórmulap. 125
- Significado y Utilizaciónp. 125
- Mean Squared Error (MSE) - Error Cuadrático Mediop. 126
- Fórmulap. 125
- Significado y Utilizaciónp. 125
- Mean Absolute Error (MAE) - Error Absoluto Mediop. 126
- Fórmulap. 125
- Significado y Utilizaciónp. 125
- Resultadosp. 127
- Ubicación de marcadoresp. 127
- Mapap. 50
- Pruebasp. 129
- Conclusionesp. 141
- TRABAJOS FUTUROSp. 143
- Bibliografíap. 144
- Ilustración 1-Integración de EKF a Visual SLAM y LiDARp. 14
- Ilustración 2-Trayectorias MCL y LUMp. 17
- Ilustración 3-Modelo escaneos MCLp. 17
- Ilustración 4-Valores de error en la orientación y posición MCLp. 18
- Ilustración 5-Ubicación de sensores LiDARp. 19
- Ilustración 6-Diferentes trayectorias calculadas por LiDARp. 20
- Ilustración 7-Tabla de comparación de resultados con cada LiDARp. 20
- Ilustración 8-Diseño de RUNE-Tagp. 21
- Ilustración 9-Diseño de robot implementado para SLAM LiDAR-basedp. 23
- Ilustración 10-Entorno de mapa para LiDAR-basedp. 23
- Ilustración 11-Resultados de mapa para LiDAR-basedp. 24
- Ilustración 12-Tabla de comparación de resultados de LiDAR-basedp. 24
- Ilustración 13-Mapa y trayectoria de "Reliable groundtruth"p. 25
- Ilustración 14-Tabla de resultados para "reliable groundtruth"p. 26
- Ilustración 15-Diagramas de trayectorias calculadas para "reliable groundtruth"p. 26
- Ilustración 16-Tabla de resultados para "Multi sensor fusion"p. 30
- Ilustración 17-Robot implementado en "Comparison o ROS-based Visual SLAM"p. 30
- Ilustración 18-Mapa obtenido en ROS para "Comparison o ROS-based Visual SLAM"p. 31
- Ilustración 19-Tabla de resultados para "Comparison o ROS-based Visual SLAM"p. 32
- Ilustración 20-Robot implementado para "Embedded Mobile ROS Platform for SLAM"p. 33
- Ilustración 21-Tipo de marcador propuesto en "Multi-ring Color Fiducial System"p. 35
- Ilustración 22-Flujo metodología para "Multi-ring Color Fiducial System"p. 35
- Ilustración 24-Ubicaciones de cámara con respecto a AprilTagp. 37
- Ilustración 25-Tabla de resultados para "Analysis and Improvements in AprilTag"p. 38
- and Improvements in AprilTag"p. 38
- Ilustración 27-Diferentes librerías a comparar en "Comparing ARTag and ARToolkit "p. 39
- Ilustración 28-Robustéz de ARTagp. 39
- Markers"p. 41
- Markers"p. 41
- Markers"p. 42
- Ilustración 34-Diseño de marcador "ChromaTag"p. 43
- Ilustración 35-Visiones según canal en "ChromaTag"p. 44
- Ilustración 36-Metodología para detectar "ChromaTag"p. 44
- Ilustración 37-Velocidad de detección para diferentes marcadores en "ChromaTag"p. 45
- Ilustración 38-Canal LAB de colores para "ChromaTag"p. 45
- Ilustración 39-Diferentes ubicaciones para detectar "ChromaTag"p. 46
- Ilustración 40-Tabla de marcadores detectados por tiempo "ChromaTag"p. 46
- Ilustración 41-Resultados comparación en "ChromaTag"p. 46
- environments"p. 48
- Ilustración 45-Tipo de marcador para "Robust Planar Marker-Based Visual SLAM"p. 49
- Visual SLAM"p. 49
- Ilustración 47-Flujo de información para "Robust Planar Marker-Based Visual SLAM"p. 50
- SLAM"p. 51
- SLAM"p. 51
- markers"p. 52
- markers"p. 53
- from planar markers"p. 53
- planar markers"p. 54
- planar markers"p. 55
- Tracking"p. 55
- Tracking"p. 56
- oclusiónp. 56
- vibraciónp. 57
- Ilustración 59-Combinación marcadores y ORB en "Uco-SLAM"p. 57
- Ilustración 60-Flujo de información para "Uco-SLAM"p. 58
- Ilustración 61-Valores por modelo con valor de confidencia en "Uco-SLAM"p. 59
- Ilustración 62-Resultados para cada método en "Uco-SLAM"p. 59
- Ilustración 63-Ubicación de marcador en Kobuki para groundtruthp. 61
- Ilustración 64-Ubicación de marcador fijo para groundtruthp. 61
- Ilustración 65-Tranformaciones para sistema global groundtruthp. 62
- Ilustración 66-Estructura de documentos paquete OnlyArUcop. 66
- Ilustración 67-Volver ejecutable un archivop. 67
- Ilustración 68-Ubicación Xiaomi en Kobukip. 69
- Ilustración 69-Ubicación de MotoG5 en oficinap. 70
- Ilustración 70-Área de visualización MotoG5p. 70
- Ilustración 71-Vistas principales Kobukip. 71
- Ilustración 72-Ficha técnica Kobukip. 71
- Ilustración 73-Dimensiones Kobukip. 72
- Ilustración 74-Nodos publicados por ROSp. 73
- Ilustración 75-Estructura nodo markers en ROSp. 73
- Ilustración 76-Referencia documentación librería ArUcop. 74
- Ilustración 77-RQT seleccionar nodop. 74
- Ilustración 78-Sistema coordenado en marcadorp. 75
- Ilustración 79-Ubicación de la cámara y signo de resultado ArUcop. 76
- Ilustración 80-Sistema coordenado de cámarap. 76
- Ilustración 81-Ubicación de marcadoresp. 77
- Ilustración 82-Ubicación de ID en oficinap. 77
- Ilustración 83-Librería de descarga de marcadores ArUcop. 78
- Ilustración 84-Área disponible en oficinap. 79
- Ilustración 85-Dimensiones reales de oficinap. 79
- Ilustración 86-Interfaz de Droidcamp. 80
- Ilustración 87-Dispositivos de video vinculadosp. 82
- Ilustración 88-Visualización de calibración de cámarap. 83
- Ilustración 89-Traslación de trayectoriasp. 86
- Ilustración 90-Transformación de marcador a cámarap. 90
- Ilustración 91-Transformación de cámara con respecto a marcador sistema globalp. 91
- Ilustración 92-Transformación de marcador a marcador sistema globalp. 91
- Ilustración 93-Transformación de cámara a sistema globalp. 92
- Ilustración 94-Transformación marcador a marcador calculadop. 92
- Ilustración 95- Posición para mismo signo para eje Xp. 96
- Ilustración 96-Posición para mismo signo en Yp. 96
- Ilustración 97-Representación gráfica de Bresenhamp. 98
- Ilustración 98-Traslación de trayectoria sistema global a sistema mapap. 99
- Ilustración 99-Signos de quaternio con respecto al cuadrantep. 102
- Ilustración 100-Valores quaternio para cámara en cuadrante 1p. 102
- Ilustración 101-Valores quaternio para cámara en cuadrante 2p. 103
- Ilustración 102-Valores quaternio para cámara en cuadrante 3p. 103
- Ilustración 103-Valores quaternio para cámara en cuadrante 4p. 103
- Ilustración 104-Ángulos formados por esquinasp. 104
- Ilustración 105-Intersección 2 ecuaciones linealesp. 105
- Ilustración 106-Ejemplo formato lista marcadores y distanciasp. 106
- Ilustración 107-Dirección sistema coordenado globalp. 108
- Ilustración 108-Vista marcadores en plano XZp. 108
- Ilustración 109-Vista marcadores en plano XYp. 108
- Ilustración 110-Posiciones de marcadores encontrados con N = 1p. 110
- Ilustración 111-Posiciones de marcadores encontrados con N = 4p. 110
- Ilustración 112-Vista de mapa generado en Rvizp. 112
- Ilustración 113-Cuadrantes ocupados en mapap. 113
- Ilustración 114-Aplicación de Bresenham para crear cuadrantes libresp. 113
- Ilustración 115-Agregar visualizaciones para Rvizp. 117
- Ilustración 116-Ejemplo de mapa en Rvizp. 118
- Ilustración 117-Editar Topic mapa en Rvizp. 118
- Ilustración 118-Ejemplo de TF en Rvizp. 119
- Ilustración 119-Editar TF en Rvizp. 119
- Ilustración 120-Ejemplo marcador en Rvizp. 120
- Ilustración 121-Editar Topic marker en Rvizp. 120
- Ilustración 122-Trayectoria Kobuki para crear mapap. 123
- Ilustración 123-Referencia de distancia perpendicular entre marcadoresp. 128
- Ilustración 124-Resultado de mapa generado para el proyectop. 129
- Ilustración 125-Resultados posiciones globales Kobuki y groundtruth Prueba 0p. 130
- Ilustración 126-Resultados posiciones globales Kobuki y groundtruth Prueba 1p. 130
- Ilustración 127-Resultados posiciones globales Kobuki y groundtruth Prueba 2p. 131
- Ilustración 128-Resultados posiciones globales Kobuki y groundtruth Prueba 3p. 131
- Ilustración 129-Resultados posiciones globales Kobuki y groundtruth Prueba 4p. 132
- Ilustración 130-Resultados posiciones globales Kobuki y groundtruth Prueba 5p. 133
- Ilustración 131-Resultados posiciones globales Kobuki y groundtruth Prueba 6p. 133
- Ilustración 132-Resultados posiciones globales Kobuki y groundtruth Prueba 7p. 134
- Ilustración 133-Resultados posiciones globales Kobuki y groundtruth Prueba 8p. 134
- Ecuación 1-Hipotenusap. 88
- Ecuación 2-Transformación de AB a ACp. 89
- Ecuación 3-Estructura matriz transformaciónp. 93
- Ecuación 4-Fórmulas de rotaciónp. 93
- Ecuación 5-Matriz de transformación inversap. 93
- Ecuación 6-Ecuación de la rectap. 101
- Ecuación 7-Ecuación de la recta despejada para Bp. 101
- Ecuación 8-Fórmula apertura para M1 y M2 signos iguales, pero M1 es mayorp. 104
- Ecuación 9-Fórmula apertura para M1 y M2 signos iguales, pero M1 es menorp. 104
- Ecuación 10-Fórmula apertura para M1 y M2 signos diferentesp. 104
- Ecuación 11-Intersección entre ecuaciones linealesp. 105
- Ecuación 12-Despejar X para intersecciónp. 105
- Ecuación 13-Ecuación de la recta para valor Y de intersecciónp. 106
- Ecuación 14-Fórmula RMSEp. 125
- Ecuación 15-Fórmula MSEp. 126
- Ecuación 16-Fórmula MAEp. 126
- Ecuación 17-Interpolación fracción de tiempop. 135
- Tabla 1-Resultados de distancias entre marcadores comparado con las realesp. 128
- Tabla 2-Valores RMSE, MSE, MAE para cada prueba VS groundtruthp. 135
- Tabla 3-Valores promedio y máximo de ubicación de Kobuki respecto a groundtruthp. 140