Safe Navigation for Unmanned Ground Vehicles: Novel Methods for Terrain Traversability Analysis and Human Detection

Loading...
Thumbnail Image

URL

Journal Title

Journal ISSN

Volume Title

School of Electrical Engineering | Doctoral thesis (article-based) | Defence date: 2017-10-06

Date

2017

Major/Subject

Mcode

Degree programme

Language

en

Pages

116 + app. 98

Series

Aalto University publication series DOCTORAL DISSERTATIONS, 175/2017

Abstract

Unmanned ground vehicles (UGV) have emerged from research institutes into the outside world over the last decade. For example, UGVs are already part of everyday operations in some mines and harbors around the world. Furthermore, self-driving cars have recently been widely discussed in the news and are expected to be on the market within the next five to ten years. Nonetheless, these UGVs are designed to operate in structured environments and cannot negotiate off-road terrain. Moreover, the reliability of state-of-the-art human detection systems is still not good enough to ensure safety at all times in some application areas.  This thesis proposes novel methods that address these limitations of current UGV systems. It presents the whole chain of developing a UGV system for off-road environments, but the main result of the thesis is to describe the novel terrain traversability analysis methods developed for unstructured environments. It also presents a new, efficient representation of traverasbility mapping and proposes two new approaches for traversability classification that exploit this representation. Furthermore, it presents two innovative methods for augmenting traversability with ultra-wideband (UWB) radar data. Since UWB radars can penetrate some amount of vegetation, the developed methods enable the clearance of obstacle-free vegetation (an area of vegetation that could be driven through) from the generated traversability maps, which is not possible with current state-of-the-art methods.  The thesis also presents two novel human detection methods that exploit 2D LIDAR (Light Detection and Ranging) and radar data, respectively. The LIDAR-based human detection method is computationally very efficient, whereas the radar-based method (utilizing only radar data) demonstrates the potential of radar sensors, typically more robust against adverse weather conditions, in human detection applications. The developed methods provide valuable insights into exploiting additional sensor modalities to supplement traditionally used, camera-based human detection methods.  The performance of all the developed methods was evaluated by conducting extensive field experiments using real UGV systems. The results demonstrate that the methods proposed in this thesis enable safe navigation performance for UGVs, even in densely vegetated, populated environments.

Miehittämättömät ajoneuvot (Unmanned Ground Vehicle, UGV) ovat viime vuosikymmenen aikana vähitellen siirtyneet tutkimuslaboratorioista osaksi jokapäiväistä elämäämme. Esimerkiksi monissa kaivoksissa ja satamissa on nykyisin tuotantokäytössä ilman kuljettajaa liikkuvia ajoneuvoja. Autonomiset autot ovat viime aikoina olleet runsaasti esillä tiedotusvälineissä. Niiden uskotaan tulevan markkinoille jo seuraavan viiden vuoden aikana. Edellä esimerkkeinä mainitut miehittämättömät ajoneuvot on kuitenkin kehitetty toimimaan strukturoidussa ympäristössä. Ne eivät pysty operoimaan ennalta tuntemattomassa kompleksisessa maastossa. Miehittämättömien ajoneuvojen havainnointijärjestelmien luotettavuus ei myöskään vielä ole kaikkiin sovelluksiin riittävän hyvä ihmisten turvallisuuden takaamiseksi.  Tässä väitöskirjassa esitellään uusia menetelmiä vastaamaan edellä mainittuihin UGV-järjestelmien haasteisiin. Työssä kuvaillaan UGV-järjestelmän koko kehitysprosessi, mutta tärkeimmät tulokset ovat uudet maaston kulkukelpoisuuden estimointimenetelmät, joilla mahdollistetaan turvallinen navigointi myös monimuotoisessa kasvillisuuden peittämässä maastossa. Työssä esitetään uusi kolmiulotteinen ympäristökuvaus kulkukelpoisuuskartoitukseen. Tällä mahdollistetaan tehokas kulkukelpoisuuden estimointi. Lisäksi esitellään kaksi innovatiivista menetelmää ultralaajakaistatutkan (UWB) mittausten yhdistämiseksi UGV:n ympäristömalliin. Näin mahdollistetaan läpiajettavan kasvillisuuden oikea luokittelu.  Työssä esitellään myös kaksi uutta menetelmää ihmisten havainnointiin. Niissä hyödynnetään laser- ja tutkamittauksia kamerapohjoisten menetelmien sijaan. Lasermittauksiin perustuva menetelmä vaatii hyvin vähän laskentatehoa ja soveltuu siksi hyvin myös järjestelmiin, joissa laskentateho on rajoittava tekijä. Tutkamittauksia hyödyntävä menetelmä mahdollistaa mittaukset myös vaikeissa sääoloissa. Kehitetyt menetelmät eivät yksinään ole riittävän luotettavia kaikkien ihmisten havaitsemiseen, mutta ne tarjoavat arvokasta lisätietoa yhdistettäväksi perinteisillä kamerapohjaisilla menetelmillä saatujen havaintojen kanssa.  Kaikkien tässä työssä kehitettyjen menetelmien suorituskykyä arvioitiin laajamittaisilla kenttätesteillä aitoja UGV-järjestelmiä käyttäen. Tulokset osoittavat, että näiden menetelmien avulla on mahdollista kehittää miehittämätön ajoneuvo, joka pystyy havaitsemaan ihmiset ja muut esteet myös tiheän kasvillisuuden seassa.

Description

Supervising professor

Visala, Arto, Prof., Aalto University, Department of Electrical Engineering and Automation, Finland

Thesis advisor

Halme, Aarne, Prof. Emeritus, Aalto University, Finland
Saarinen, Jari, Dr., GIM Oy, Finland

Keywords

traversability estimation, obstacle detection, human detection, ultra-wideband radar, unmanned ground vehicle, kulkukelpoisuuden estimointi, esteiden havainnointi, ihmisen havainnointi, laajakaista-tutka, miehittämätön ajoneuvo

Other note

Parts

  • [Publication 1]: Pekka Appelqvist, Jere Knuuttila, Juhana Ahtiainen. Development of an Unmanned Ground Vehicle for Task-Oriented Operation Considerations on Teleoperation and Delay. In IEEE/ASME International Conference on Advanced Intelligent Mechatronics (AIM), Zürich, Switzerland, pp. 258:1–258:6., September 2007.
    DOI: 10.1109/AIM.2007.4412567 View at publisher
  • [Publication 2]: Pekka Appelqvist, Jere Knuuttila, Juhana Ahtiainen. Mechatronics Design of an Unmanned Ground Vehicle for Military Applications. Mechatronic Systems Applications, Annalisa Milella Donato Di Paola and Grazia Cicirelli (Ed.), Chapter 15, pp. 237–262, InTech, March 2010.
    DOI: 10.5772/8919 View at publisher
  • [Publication 3]: Juhana Ahtiainen, Sami Terho, and Sampsa Koponen. Radar based detection and tracking of a walking human. In IFAC Symposium of Intelligent Autonomous Vehicles (IAV), Lecce, Italy, 43/16, pp. 437–442, September 2010.
    DOI: 10.3182/20100906-3-IT-2019.00076 View at publisher
  • [Publication 4]: Tapio Taipalus and Juhana Ahtiainen. Human Detection and Tracking with Knee-High Mobile 2D LIDAR. In IEEE International Conference on Robotics and Biomimetics (ROBIO), Karon Beach, Phuket, Thailand, pp. 1672–1677, December 2011.
    DOI: 10.1109/ROBIO.2011.6181529 View at publisher
  • [Publication 5]: Juhana Ahtiainen, Thierry Peynot, Jari Saarinen, and Steven Scheding. Augmenting Traversability Maps with Ultra-Wideband Radar to Enhance Obstacle Detection in Vegetated Environments. In IEEE/RSJ International Conference on Intelligent Robots and Systems (IROS), Tokyo, Japan, pp. 5148–5155, November 2013.
    DOI: 10.1109/IROS.2013.6697101 View at publisher
  • [Publication 6]: Juhana Ahtiainen, Thierry Peynot, Jari Saarinen, Steven Scheding, Arto Visala. Learned Ultra-Wideband RADAR Sensor Model for Augmented LIDAR-based Traversability Mapping in Vegetated Environments. In The International Conference on Information Fusion, Washington, DC, USA, pp. 953–960, July 2015.
  • [Publication 7]: Juhana Ahtiainen, Todor Stoyanov, Jari Saarinen. Normal Distributions Transform Traversability Maps: LIDAR-Only Approach for Traversability Mapping in Outdoor Environments. Journal of Field Robotics, 34(3):600–621, May 2017.

Citation