1 / 25

Gépi látáson alapuló akadályelkerülés

Gépi látáson alapuló akadályelkerülés. Kitekintés. DARPA urban challenge Kormányzó-, fékrásegítő- és automata parkoló-rendszer vezérlése (LIDAR). Célkitűzés. Aktív szenzor kifejlesztése A környezet valós leképezése Mindennapi forgalomban kapható eszközök felhasználásával

munin
Download Presentation

Gépi látáson alapuló akadályelkerülés

An Image/Link below is provided (as is) to download presentation Download Policy: Content on the Website is provided to you AS IS for your information and personal use and may not be sold / licensed / shared on other websites without getting consent from its author. Content is provided to you AS IS for your information and personal use only. Download presentation by click this link. While downloading, if for some reason you are not able to download a presentation, the publisher may have deleted the file from their server. During download, if you can't get a presentation, the file might be deleted by the publisher.

E N D

Presentation Transcript


  1. Gépi látáson alapuló akadályelkerülés

  2. Kitekintés DARPA urbanchallenge Kormányzó-, fékrásegítő- és automata parkoló-rendszer vezérlése (LIDAR) Somlyai L., Csaba Gy. - OTDK 2011

  3. Célkitűzés Aktív szenzor kifejlesztése A környezet valós leképezése Mindennapi forgalomban kapható eszközök felhasználásával Autonóm közlekedő robotautó elkészítése Somlyai L., Csaba Gy. - OTDK 2011

  4. Somlyai L., Csaba Gy. - OTDK 2011

  5. Hardver Előzmények Magyarok a Marson 2008 Felülnézeti kép alapú irányítás II. helyezés Távirányítós terepjáró 2 db szervo (két-két kerék kormányzása független) 2 db meghajtó motor Somlyai L., Csaba Gy. - OTDK 2011

  6. Hardver • CAN bridge • PC és a CAN busz közötti kapcsolattartás • Motorszabályzó • Motorszabályzó (PID) • Optikai fordulatszámmérés • 2x100 W motormeghajtó híd • Kormány szervóvezérlés • Megtett távolság mérése Somlyai L., Csaba Gy. - OTDK 2011

  7. t1 t2 dt2 dt1 = 1900 mm γ 600 mm 300 mm Robot Aktív szenzor Elemei Lézer dióda Üvegrúd Kamera Mérés elve Lézersík kivetítése A tárgyakon a lézer megtörik Lézer detektálása A lézerelhelyezkedése a képen függ a távolságtól Somlyai L., Csaba Gy. - OTDK 2011

  8. Szenzor kalibrálása • Tesztrendszer • Kamera: 640x360 • Lézer és kamera szög: 60° • Maximális érzékelési távolság: 2 m • Pontosság függ • Kamera kép felbontásától • Az objektum távolságától • Tesztrendszeren elérhető maximális felbontás: 0,1 - 0,5 cm Somlyai L., Csaba Gy. - OTDK 2011

  9. Vezérlőszoftver • Cél • Kameraképből a haladási irány meghatározása Kamera Kamera korrekció Somlyai L., Csaba Gy. - OTDK 2011

  10. Vezérlőszoftver • Cél • Kameraképből a haladási irány meghatározása Kamera Kamera korrekció Lézer detektálás Somlyai L., Csaba Gy. - OTDK 2011

  11. Lézer detektálás • Célja: csak azon pixelek meghagyása,amik a lézert ábrázolják • Lézerdetektálási módszerek • Intenzitás • Színtartomány • Éldetektálás Somlyai L., Csaba Gy. - OTDK 2011

  12. Lézer detektálás • Különböző egyszerűbb eljárások összevonása • Gyorsaság megmarad, eredményesség jobb • Színtartomány + Küszöbölés • Élszűrés, hiszterézisküszöbölés • Színtartomány + Küszöbölés & Élkeresés Somlyai L., Csaba Gy. - OTDK 2011

  13. Vezérlőszoftver • Cél • Kameraképből a haladási irány meghatározása Kamera Kamera korrekció Lézer detektálás Mélységi térkép Mélységi térkép redukálás Mélységi térkép kiterjesztés Somlyai L., Csaba Gy. - OTDK 2011

  14. Mélységi térkép • Virtuális felülnézeti kép • Valós térbeli távolságok • Kép transzformáció • Forráskép: lézer képe • Leképezés minden pixelre • Kiterjesztés • Autó fizikai tulajdonságai • Képméret csökkentése • Kis felbontású mélységi térkép készítése, az útvonaltervezéshez Somlyai L., Csaba Gy. - OTDK 2011

  15. Mélységi térkép kiterjesztése Somlyai L., Csaba Gy. - OTDK 2011

  16. Mélységi térkép ellenőrzése b) 100 cm • Tesztkörnyezet • Kamerakép • Virtuális felülnézeti kép • Mért értékek c) 150 cm a) 50 cm d.) 170 cm Somlyai L., Csaba Gy. - OTDK 2011

  17. Mélységi térkép ellenőrzése • A távolságmérésa jármű dőlésére invariáns • Kanyarodás • Egyenetlen terep Somlyai L., Csaba Gy. - OTDK 2011

  18. Vezérlőszoftver • Cél • Kameraképből a haladási irány meghatározása Kamera Kamera korrekció Lézer detektálás Mélységi térkép Útvonal tervezés Mélységi térkép redukálás Mélységi térkép kiterjesztés Somlyai L., Csaba Gy. - OTDK 2011

  19. Útvonaltervezés • Célja • Két pont között járható út keresése • Haladási irány meghatározása • Mélységi térképen • Hullám továbbterjedés [1] algoritmussal (gyors) • Potenciálmező felépítése a célból indulva (távolság) • Startból indulva a legkisebb értékek keresése [1]: A. P. Munuzuri, L. O. ChuaNoel: Shortest-path-finderalgorithmin a two-dimensionalarray of nonlinearelectroniccircuits; International Journal of Bifurcation and Chaos, Vol. 8, No. 12, pp. 2493-2501(1998) Somlyai L., Csaba Gy. - OTDK 2011

  20. Vezérlőszoftver • Cél • Kameraképből a haladási irány meghatározása Kamera Kamera korrekció Lézer detektálás Mélységi térkép Beavatkozás Útvonal tervezés Mélységi térkép redukálás Mélységi térkép kiterjesztés Somlyai L., Csaba Gy. - OTDK 2011

  21. START Type Dest. Funct. Id. 1 2 3 4 5 6 7 8 CRC STOP START Header Data CRC STOP Navigáció • Kommunikáció a robottal • Soros porton keresztül (USB - FTDI) • Keretekben • Megtett távolság visszamérése • Optikai tárcsás érzékelővel • Pontosság • 20 mérésből • További feldolgozás céljából megtett útvonal adatainak tárolása Somlyai L., Csaba Gy. - OTDK 2011

  22. Elért eredményeink • Stabilan működő jármű (megbízható elektronika) elkészítése • Helyes eredményeket adó szenzorrendszer megépítése • Változatos körülmények között is (erdő, napsütés, zárt tér) • Akadálydetektálás • Alakzattól független (téglatest, henger, érdes fatörzs) • Eredményessége fényviszony függő • Mélységi térkép készítés • Felépített tesztkörnyezetet alacsony hibaszázalékkal detektálta • Sikeres autonóm közlekedés megvalósítása • Váratlanul felbukkanó akadályok előtt megáll és visszatolat • Elkészült vezérlőszoftver Somlyai L., Csaba Gy. - OTDK 2011

  23. Továbbfejlesztési lehetőségek • Szenzorrendszer fejlesztése • KINECT • RGBD kép • 0,5 m – 10 m működési tartomány (pontosság: ~5 mm) • Környezeti fényviszonyokra érzéketlenebb a lézeres megoldásnál • Szoftverben egyszerűen lecserélhető • 2010 év végén jelent meg Somlyai L., Csaba Gy. - OTDK 2011

  24. Bemutató Somlyai L., Csaba Gy. - OTDK 2011

  25. Köszönjük a figyelmüket Somlyai L., Csaba Gy. - OTDK 2011

More Related