Mi az a mélységérzékelő kamera? Milyen típusai vannak a mélységérzékelő kameráknak?

A hagyományos 2D kamerák csak egy sík, kétdimenziós világot látnak. Felismerik a tárgyak alakját és színét, de nem értik meg térbeli helyzetüket, méretüket vagy távolságukat. Ez korlátozza számos fejlett robotikai és automatizálási alkalmazás képességeit. A mélységérzékelő kamerák megjelenése megváltoztatta ezt a helyzetet. Ezek új „háromdimenziós” érzékelési képességet biztosítanak a gépek számára, lehetővé téve, hogy a rendszerek hasonlóan értsék meg a teret, mint az emberek, és így széles körű alkalmazási lehetőséget nyitnak az beágyazott látás- és 3D érzékelési megoldások számára.

Mint kameramodul-specialista tanácsadó, ebben a cikkben részletesen elemezzük a mélységérzékelő kamerák technológiáját, fő típusaikat, valamint alkalmazásaikat a robotikában, a logisztikában és az AR/VR-ben. Megvizsgáljuk az egyes technológiák jellemzőit, hogy segítsük a mérnököket abban, megértsék, hogyan működnek a mélységérzékelő kamerák, és a legmegfontoltabb döntést hozzák projektiük számára.

Mi az a mélységérzékelő kamera, és miért van rá szükség?

A mélységérzékelő kamerát – amelyet gyakran 3D kamerának is neveznek – olyan kamera, amely képes minden képpont mélységi információját rögzíteni egy jelenetben. Ez nemcsak egy hagyományos RGB-képet, hanem egy mélységképet vagy pontfelhő-adatot is kimenetelként szolgáltat. Egy mélységkép minden képpontjának értéke a megfelelő pont és a kamera közötti távolságot jelzi.

a 3D kamerákra azért van szükség, mert a 2D képek nem oldják fel a látás egy alapvető problémáját: a térbeli ambivalenciát. Egy 2D kamera nem tudja megkülönböztetni egymástól egy közel lévő kis tárgyat és egy távol lévő nagy tárgyat. Sőt, a megvilágítás változásai, az árnyékok és a takarások mind olyan okok lehetnek, amelyek miatt a 2D látási rendszerek meghibásodnak. Például egy árnyékban lévő tárgyat tévesen más tárgynak lehet venni, vagy egyszerűen nem is lehet észrevenni.

A mélységkamerák tökéletesen megoldják ezt a problémát, mivel pontos távolságinformációt nyújtanak. Olyan geometriai információt biztosítanak a gépek számára, amelyet nem befolyásolnak a megvilágítás, a szín és a felületi mintázat. Ez a 3D alakalapú érzékelési képesség lehetővé teszi, hogy a gépek megértsék és kölcsönhatásba lépjenek a valós világgal, így megtalálják az alapját az beágyazott látás 3D érzékelési megoldásainak megvalósításának.

Az összes jelenleg elérhető mélységérzékelési technológia közül a három legnépszerűbb és leggyakrabban használt:
1. Strukturált fény
2. Időmérés (Time of Flight)
2.1 Közvetlen időmérés (dToF)
2.1.1 LiDAR
2.2 Közvetett időmérés (iToF)
3. Sztereó látás

Nézzük most részletesebben, hogyan működik mindegyik ezekből a mélységérzékelési technológiákból.

A mélységkamerák három fő irányzata

Ahhoz, hogy megértsük, hogyan működnek a mélységérzékelésre képes kamerák, fontos alaposan megismerni a mögöttük álló mélységkamera-technológiák alaptípusait. Jelenleg három fő irányzata létezik a mélységkamerák technológiájának.

1. Strukturált fénykamera

A strukturált fénykamera egy aktív képfeldolgozási technológia. Erőteljes infravörös vetítőt használ egy ismert fényképpel, például több ezer pontból álló specifikus mintázattal, amelyet egy jelenetre vetít. Ezután egy vagy több kamerával rögzíti a mintázat torzulását egy tárgy felületén. A torzulás kiszámításával a kamera meghatározhatja a tárgy háromdimenziós alakját és távolságát.

Ez a technológia kiválóan pontos és nagy felbontású mélységadatokat szolgáltat, különösen közelről. Az alamilliméteres mérési képessége kiválóan alkalmazható olyan feladatoknál, amelyek pontos mérést igényelnek a tárgyak részleteinél. Azonban a vetített fényet befolyásolhatja a környezeti fény (különösen az erős napfény), ami csökkentheti a mérés pontosságát. Továbbá, ha több strukturált fénykamerát használnak ugyanabban a térben, a vetített mintázatok zavarhatják egymást.

2. Időméréses kamera

A fény sebességének állandósága elvén alapuló időmérési (Time-of-Flight, ToF) kamerák infravörös fényt bocsátanak ki, és megmérik, mennyi idő telik el, amíg a fényimpulzus visszaverődik a kamerára. Ebből az időkülönbségből pontosan kiszámítható az objektum és a kamera közötti távolság. Ez a folyamat általában párhuzamosan történik minden képponton, lehetővé téve a nagy képkockasebességű mélységfelvételt.

A távolság meghatározására használt módszertől függően az időmérési (ToF) technológiát két típusra osztják: közvetlen időmérési (DToF) és közvetett időmérési (iToF) módszerre.

2.1. Közvetlen időmérési (dToF) módszer

a dToF módszer közvetlenül méri a fényimpulzus kibocsátása és visszatérése között eltelt időt. Ehhez egy speciális érzékelőt használnak, amely pontosan érzékeli az egyes fotonok érkezési idejét. Ez a közvetlen mérési módszer hosszabb mérési távolságokat és magasabb pontosságot tesz lehetővé.

2.1.1. LiDAR

A LiDAR (lézer-radar) egy típusa a dToF technológiának. Általában lézeres szkennerrel működik, amely lézerfényt bocsát ki pontonként egy jelenetben, majd az visszavert fényt érzékeli, hogy nagy pontosságú pontfelhőt hozzon létre. A LiDAR hosszú észlelési távolsága és erős ellenállása a környezeti fénynek ideálissá teszi az önvezető járművek és a robotok számára készített nagy pontosságú térképezés számára.

2.2. Közvetett időmérés (iToF)

az iToF nem méri közvetlenül az időt. Ehelyett folyamatosan modulált fényhullámot bocsát ki, és a visszavert és a kibocsátott fény közötti fáziskülönbséget méri. Ez a fáziskülönbség arányos a fény repülési idejével. Az iToF rendszerek általában kompaktabbak, kevesebb energiát fogyasztanak és magasabb képkockasebességet érnek el. Rövid távú beltéri alkalmazásokhoz, például mozdulatfelismeréshez és arcfelismeréses hitelesítéshez alkalmasak.

3. Sztereó látókamera

Egy sztereó látási kamera az emberi binokuláris látást utánozza. Két kamerát használ, amelyeket rögzített alapvonal-távolságra helyeznek el, hogy egyszerre rögzítsék ugyanazt a jelenetet. Összetett algoritmusok segítségével a rendszer megtalálja a megfelelő pontokat a két képen, majd a háromszögelés elveit alkalmazva kiszámítja minden egyes pont helyzetét a háromdimenziós térben, így egy diszparitás-térképet hoz létre.

Ez a passzív technológia nem igényel további fényforrást, ezért kifelé, valamint természetes fényben gazdag környezetekben is alkalmas használatra. Nagy felbontású mélységtérképeket biztosít, amelyeket nem befolyásol az objektum anyaga. Ugyanakkor a sztereó látás számításigényes, és erőteljes processzort igényel a képek összeillesztéséhez. Továbbá problémát okozhatnak a textúra nélküli területek (például fehér falak vagy egyszínű felületek), mivel az algoritmus nem tud megfelelő pontokat találni.

Mik a mélységkamerák fő alkalmazási területei?

a 3D kameratechnológia elhagyta a laboratóriumot, és most már kereskedelmi célra is használják; sokoldalú képességei forradalmasítják a különféle iparágakat.

1. Robotika és automatizáció

A robotokhoz használt mélységkamerák a robotok „térbeli érzékelő szervei”. Az automatizált gyártósorokon a robotoknak pontosan fel kell ismerniük és meg kell ragadniuk a véletlenszerűen egymásra halmozott alkatrészeket. A 3D kamerák nagyon pontos pontfelhő-adatokat tudnak létrehozni, amelyek segítségével a robotok megértik az objektumok háromdimenziós helyzetét és pozícióját, így lehetővé válik a pontos megfogás, rendezés és összeszerelés, ami jelentősen növeli a termelési hatékonyságot és rugalmasságot.

2. Kiegészített valóság (AR) és virtuális valóság (VR)

Az AR/VK-eszközök valós idejű környezeti érzékelésre van szükségük ahhoz, hogy zavartalanul integrálják a virtuális objektumokat a valós világba. A mélységkamerák háromdimenziós szkennelést végeznek a felhasználó szobájában, és pontos mélységtérképet hoznak létre. Ez lehetővé teszi, hogy a virtuális objektumok pontosan helyezkedjenek el egy asztalon vagy rejtve maradjanak valós tárgyak mögött, jelentősen javítva a felhasználó immerszív és interaktív élményét.

3. Logisztika és raktármenedzsment

Az automatizált raktározás, a csomagok térfogatának mérése és a raklapozás a logisztikai iparág alapvető követelményei. A 3D kamerák gyorsan megmérhetik a csomagok térfogatát és súlyát, így optimalizálható a teherautók rakodása. Az automatizált raktárakban segíthetnek a robotoknak a polcokról történő pontos tárgykihúzásban és -lerakásban, valamint készletfelvételek végzésében, így hatékony raktármenedzsmentet tesznek lehetővé.

4. Egészségügy és biometria

Az egészségügyi szektorban a 3D-kamerák érintésmentes testméretek felvételére, testtartás-elemzésre és műtéti tervezésre használhatók. A 3D-szkennelés segítségével a mélységérzékelő kamerák emberi modelleket hozhatnak létre egyéni protézisek és ortézisek gyártásához. A biometriában az egyedi arcalak geometriáját azonosítják, így biztosítva megbízhatóbb hitelesítést, valamint megakadályozva a fényképek vagy videók hamisításán alapuló támadásokat.

Összefoglalás

A mélységérzékelő kamerák jelentős technológiai fejlődést jelentenek az beágyazott látástechnika területén. Legyen szó strukturált fényről, időmérésen alapuló (time-of-flight) vagy binokuláris látásról – mindegyik technológia egyedi megoldásokat kínál a 3D-érzékeléshez. A különböző mélységkamerák elveinek és jellemzőinek megértése, valamint az alkalmazási forgatókönyvhöz (például robotikai mélységkamerák) pontosan megfelelő típus kiválasztása elengedhetetlen minden gépi látástechnikai mérnök számára. A mélységkamerák lehetővé teszik a gépek számára, hogy háromdimenziós világot érzékeljenek, és mélyreható átalakulást indítanak el az automatizálástól az intelligenciáig.

A Muchvision segít kiválasztani a megfelelő mélységkamerát

Nehezen dönti el, melyik mélységkamera a legmegfelelőbb projektje számára? Lépjen kapcsolatba szakértőinkkel még ma az ágyazott látási és 3D érzékelési megoldások terén nyújtott szakmai tanácsadásért, amely segít Önnek a legjobb gépi látási rendszer építésében alkalmazásának megfelelően.