Zábavné a informačné systémy sa stávajú čoraz častejšie súčasťou nášho života. Jedným z najmodernejších a pre človeka najprirodzenejších spôsobov interakcie je obohatená realita, kde reálny svet je doplnený o obrazové, textové alebo zvukové virtuálne prvky.
Rozšírená realita nám umožňuje veľmi jednoducho sprostredkovať turistické informácie o okolí pri jazde automobilom v reálnom čase alebo využiť realitu ako základ pre rôzne interaktívne hry. Automobil sa takýmto spôsobom môže stať interaktívnym turistickým sprievodcom alebo zábavným systémom.
Cieľom tohto projektu je zmeniť bočné okienko automobilu na transparentnú projekčnú plochu, pomocou ktorej bude reálny svet dopĺňaný o ľubovoľné virtuálne informácie so zábavným i náučným zámerom. Na okienku auta nám tak vznikne rozšírená realita, ktorá nás môže informovať o našom bezprostrednom okolí.
Výsledkom projektu je prototyp interaktívneho systému pre obohatenú realitu pre spolucestujúceho v automobile s názvom Carlos. Na prezentáciu vygenerovaných informácii je použitý malý LED projektor spolu s transparentnou projekčnou fóliou, ktorá je pripevnená na bočné sklo automobilu. Aplikáciu môže používateľ ovládať veľmi jednoducho -prostredníctvom mobilného telefónu.
Systém Carlos je vyvíjaný študentmi Slovenskej technickej univerzity na Fakulte informatiky a informačných technológií v rámci predmetu Tímový projekt v 1. ročníku inžinierskeho štúdia na fakulte. Členmi tímu sú (zľava) Bc. Patrik Polatsek, Bc. Martin Petluš, Bc. Peter Hamar , Bc. Róbert Sabol, Bc. Lukáš Sekerák, Bc. Jakub Mercz. Názov nášho tímu je Carlos.
Predstavujeme náš systém Carlos
Základom našej aplikácie je rozoznávanie kamerou nasnímaných zaujímavých objektov. K takto detekovanému objektu doplní do reálnej scény nielen jeho názov, ale aj iné zaujímavé informácie. Napr. pri pamiatkach zobrazí históriu, otváracie hodiny a výšku vstupného. Výhodou našej aplikácie je aj to, že nevyžaduje pripojenie na internet.
Carlos nepredstavuje len informačný, ale aj zábavný systém. Preto je súčasťou systému aj hra, ktorá využíva rozšírenú realitu. Účelom tejto hry je ovládať prostredníctvom mobilného telefónu lietadlo s cieľom udržať ho čo najdlhšie nad horizontom. Let lietadla je ovládaný jednoduchým nakláňaním mobilného zariadenia, príp. gestami.
Obrázok 1. Ukážky z hry “Lietadlo”.
Implementácia systému zahŕňa viaceré algoritmy z oblasti počítačovej vízie (napríklad detektor Canny, ktorý na snímke určí oblasti oblohy), počítačovej grafiky a interakcie človeka s počítačom. Systém ďalej využíva viaceré periférie ako
- kameru na zachytenie snímok,
- zariadenie Kinect na sledovanie pozície hlavy,
- mobilný telefón s operačným systémom Android na získavanie aktuálnych GPS súradníc a na ovládanie celého systému,
- projektor na zobrazenie virtuálnych informácií na sklo automobilu s transparentnou fóliou.
Celý systém sa ovláda cez mobilné zariadenie so systémom Android (obrázok č. 2).
Obrázok 2. Obrazovky mobilnej aplikácie
Náš systém predstavuje spojenie viacerých technológií a v súčasnosti veľmi populárnych oblastí informatiky akou je počítačová grafika, počítačové videnie a interakcia človeka s počítačom. Projekt demonštruje, akým jednoduchým spôsobom môže používateľ komunikovať a pracovať s moderným systémom v automobile s využitím kamery, zariadenia Kinect a mobilnej aplikácie. Projekt rovnako poukazuje na široké využitie rozšírenej reality, ktorá nám umožnila veľmi jednoducho sprostredkovať turistické informácie o okolí a zároveň využiť reálne prostredie ako základ pre interaktívnu hru.