Systém ORC vidí díky odrazům. Kredit: MIT

Dnešní kamery strojového vidění, jaké jsou například ve výbavě autonomních automobilů, dronů a dalších podobných robotů, obvykle nevidí za roh. Právě takovou schopnost by ale časem mohl nabídnout pozoruhodný systém strojového vidění ORC, který k tomu rafinovaně využívá odrazy na lesklých objektech.

Kushagra Tiwary. Kredit: K. Tiwary.

Systém ORC, čili „Objects as Radiance-Field Cameras“ vyvíjejí inženýři amerického institutu MIT a Rice University. Jde o technologii, která analyzuje různě zkreslené odrazy na povrchu lesklých objektů a zjišťuje, co se vlastně odráží a jak je to daleko. V případě autonomních automobilů to mohou být například odrazy na lesklém povrchu jiných automobilů, které se nacházejí poblíž křižovatky a zobrazují provoz mimo přímý výhled běžných kamerových systémů.

Logo. Kredit: MIT.

ORC pracuje tak, že zpracovává série snímků z povrchu lesklých objektů, které byly získány vždy z mírně odlišného úhlu během toho, jak se kamera ORC přibližuje k lesklému objektu. Umělá inteligence ORC rozloží odrazy na lesklém povrchu do jednotlivých pixelů a určuje, jak se tyto pixely při změně pozice kamery mění vzhledem k ostatním pixelům.

Inteligence je z toho schopná odvodit, jaký je tvar odráženého objektu, i jeho barva a textura, čímž kompenzuje zkreslení způsobené odrazem. Systém ORC modeluje odráženou scénu a dokáže určit směr a intenzitu světelných paprsků, které dopadají na každý bod této scény anebo jsou z něj vyzařovány. Z těchto údajů pak lze vyčíst, jak jsou tyto body vzdálené od lesklého povrchu i samy mezi sebou.

Jak uvádí vedoucí výzkum Kushagra Tiwary, s kolegy názorně předvedli, že s jejich postupem, který zahrnuje virtuální pixely a virtuální senzory, může být prakticky každý povrch, který odráží záření, přeměněn na senzor. Nová metoda by mohla nalézt široké uplatnění v řadě odvětví, od pokročilých systémů pro vyhýbání se kolizím, k leteckým dronům, které mohou za letu díky odrazům z objektů získat obraz situace na zemi, jaký by pro takový dron jinak nebyl dostupný..

Literatura

MIT News 10. 5. 2023.

arXiv:2212.04531.