Hogyan lehet fenntartani a kamerák színazonosságát vegyes megvilágítás mellett

Biztonsági kameráktól és okos otthoni eszközöktől az autóipari képfeldolgozásig, az ipari ellenőrzésig, a gyógyászati endoszkópiáig és a robotlátásig a kamerarendszerek egy látszólag egyszerű, de valójában megtévesztően összetett követelményt osztanak meg: a rögzített színeknek meg kell egyezniük az emberek által látottakkal.

A mindennapi világítás ezt nehézzé teszi. Egy irodában a nappali fény egy ablakból keveredik a fénycsöves világítással. Egy bevásárlóközpontban a hűvös mennyezeti lámpák átfedésbe kerülnek a meleg kijáratvilágítással. Egy parkolóházban fehér LED-ek és sárga nátriumlámpák világítják meg ugyanazt a jelenetet. Ezek a hétköznapi környezetek a legnehezebbek a kamerák számára pontos színreprodukció szempontjából. A kevert világítás gyakori a gyakorlati telepítésekben, ahol egyetlen, egységes fényforrás viszonylag ritka.

Ez a cikk elmagyarázza, miért okoznak a kamerák színeltolódást kevert világítás mellett, hogyan hangolják és tesztelik az ilyen körülményeket a mérnökök, és hogyan tartják fenn a színminőség konzisztenciáját a gyártás során. Olyan alkalmazásokban, amelyek színt használnak döntéshozatalra, a pontos színreprodukció funkcionális követelmény.

Miért okoznak színhibákat a vegyes megvilágítási körülmények

A megfigyelt szín a fényforrás, az objektum fényvisszaverési módja és a megfigyelő – legyen az ember vagy kamera – közötti kölcsönhatástól függ.

Amikor a fény egy tárgyra esik, a felület egyes hullámhosszakat erősebben ver vissza, mint másokat. A visszavert fény belép a kameralencsébe, és a képérzékelőn elhelyezett szűrőtömb (CFA) a vörös, zöld és kék csatornákban mintavételezi. Az képfeldolgozó egység (ISP) ezután olyan műveleteket hajt végre, mint a demosaicing, a fehérkiegyensúlyozás, a színkorrekció és a gamma-kódolás, hogy létrehozza a képernyőn látható képet.

Ezek a feldolgozási lépések a megvilágításra vonatkozó feltételezéseken alapulnak. A vegyes megvilágítás három módon teszi próbára ezeket a feltételezéseket.

1. Különböző színhőmérsékletek. Az emberi látás alkalmazkodik a megvilágításhoz, és hajlamos fehér tárgyakat fehérként érzékelni különböző megvilágítási körülmények között. Egy kamera algoritmikusan becsüli meg a fehérpontot. Amikor meleg, 2700 K-es LED-ek és hideg, 6500 K-es nappali fény világítja meg ugyanazon jelenet különböző részeit, egyetlen globális fehérkiegyensúlyozási beállítás semlegesítheti az egyik területet, miközben más területen színeltolódást hagy.

2. Különböző spektrális teljesítményeloszlások. A izzólámpák folytonos spektrumot termelnek. A fénycsövek és az LED-ek keskeny csúcsokat és hézagokat mutathatnak a látható spektrumban. Két fényforrás ugyanazzal a korrelált színhőmérséklettel rendelkezhet, mégis eltérő hullámhossz-kombinációkkal világítja meg ugyanazt a tárgyat. Ahogy a fény összetétele változik a jelenet során, úgy változik a tárgy által visszaverődő spektrum is.

3. Villogás és képkockáról képkockára változó ingadozás. A hálózati árammal működtetett világítás villódzhat, és a megvilágítás modulációjának és az expozíciós időzítésnek a nem egyezése látható sávokat eredményezhet. A korosodott lámpák és a PWM (impulzusszélesség-módulációs) fényerő-szabályzók szintén okozhatnak fényerő- vagy színeltéréseket képkockánként.

Az eredmény lehet zöldes vagy vöröses árnyalat a bőrön, színezett fehér falak, pontatlan termékszínek, illetve látható színkülönbségek papíron és textílián. Ezek a hibák különösen fontosak, ha a szín orvosi értékelésre, ipari szortírozásra, minőségellenőrzésre vagy kiállítási fényképezésre szolgál.

A kamerás színfeldolgozási folyamat

A kamerás folyamat négy része határozza meg, hogyan reprodukálja a színeket vegyes megvilágítás mellett.

1. Automatikus fehérkiegyensúlyozás (AWB). Az AWB becslést ad a jelenet megvilágítójáról, és a vörös és kék csatornák erősítését állítja be úgy, hogy semleges felületek színárnyalatmentesen jelenjenek meg. Egyetlen erősítési értékhalmaz korlátozott képességgel rendelkezik különböző forrásokból származó megvilágítással megvilágított területek korrigálására.

2. Színkorrekciós mátrix (CCM). A fehér egyensúly beállítása után a kamerának továbbra is korrigálnia kell az egyes színek megjelenítését. Egy Bayer-érzékelő spektrális válasza eltér az emberi látás spektrális válaszától. Egy 3 × 3-as mátrix leképezi az érzékelő RGB-válaszát egy cél színrendszer felé. A kamerarendszerek gyakran külön mátrixokat kalibrálnak különböző megvilágítási forrásokhoz.

3. Gamma és tonus-leképezés. A gamma-kódolás lineáris képadatokat nemlineáris jelre képez le. A tonus-leképezéssel együtt befolyásolja, hogyan jelennek meg a középtónusok és milyen telítettek lesznek a színek.

4. Színrendszerek és keresőtáblák. A kamera a színeket egy kimeneti színrendszerbe – például sRGB-be vagy Display P3-ba – képezi le. Ott, ahol finomabb nemlineáris korrekció szükséges, egy háromdimenziós keresőtábla (3D LUT) színeket tud korrigálni a mátrix által elérhetőn túlmenően.

Egy globális paraméterkészlettel hangolt feldolgozási folyamat ugyanazt a korrekciót alkalmazza az egész képkockára. Ha egy ablak világítja meg egy szoba egyik oldalát, míg melegfehér LED-ek a másik oldalt, akkor a két terület különböző korrekciókat igényelhet.

Mérnöki megoldások pontos színvisszaadáshoz vegyes megvilágítás mellett

A megvilágítási körülményekhez illő hardver kiválasztása

Képérzékelő és szín-szűrőtömb (CFA). Értékelje a szenzor RGB-spektrális válaszát a képválasztás során jellemző megvilágítás mellett. Ellenőrizze, hogy egyes fényforrások nem okoznak-e túlterhelést egy csatornán, vagy túl alacsony jelet másik csatornán, ami megbízhatatlan korrekciót eredményezne.

Optikai szűrők és infravörös fény elutasítása. Az infravörös fény a látható tartományon kívül is hozzájárulhat az RGB-jelhez, és megváltoztathatja a kamerával rögzített színeket. Megfelelően kiválasztott infravörös elnyelő szűrő segíthet csökkenteni a nem kívánt vörös árnyalatot, különösen olyan jelenetekben, amelyek jelentős infravörös összetevőt tartalmaznak.

Villogáskontroll és széles dinamikatartomány. A megvilágítási források modulációjához igazítsa a kitettségi időzítést, amennyire lehetséges. Értékelje az HDR- vagy széles dinamikatartományú (WDR) beállításokat olyan jelenetekhez, amelyek egyszerre tartalmaznak világos és sötét területeket. A sávok kezelése és a kitettség változásainak szabályozása stabilabb képet biztosít a színfeldolgozó folyamat számára.

Színkorrekció alkalmazása a jelenethez

Régióspecifikus vagy többféle megvilágítási forrást figyelembe vevő fehér egyensúly. Csoportosítsa a hasonló megvilágítási jellemzőkkel rendelkező területeket, becsülje meg a megvilágítási forrást minden régióban, és alkalmazzon helyi erősítéseket. Simítsa a régiók közötti átmeneteket, hogy a korrekció ne hozzon létre látható határvonalakat.

Színkorrekciós mátrixok közötti interpoláció. Kalibrálja a színkorrekciós mátrixokat (CCM) több referencia színhőmérsékleten. Ha a becsült színhőmérséklet két kalibrációs pont között helyezkedik el, akkor a megfelelő mátrixok között interpoláljon, hogy elkerülje a színvisszaadás hirtelen változásait.

A végeredmény finomhangolása 3D LUT segítségével. Használjon 3D LUT-ot a kezdeti korrekció után fennmaradó nemlineáris színhibák kijavítására. Ez különösen hasznos olyan alkalmazásokban, ahol a bőrszínek vagy termékszínek pontos szabályozása szükséges.

A megvilágítási forrás becslésének javítása. A szürkeárnyalatos statisztikák és a tanult megvilágítási forrás-becslési modellek segíthetnek a különböző források relatív hozzájárulásának megbecslésében, és jobb bemeneti adatokat nyújthatnak a korrekciós algoritmus számára.

Kalibrálás és tesztelés a gyártási konzisztencia érdekében

A vegyes megvilágítás laborban történő reprodukálása. Használjon fénykabinokat vagy szabályozott tesztkörnyezetet függetlenül beállítható fényforrásokkal. Hozza létre a kombinációkat, például nappali fény és fluoreszkáló fény, illetve hideg és meleg LED-ek. Használja a szokásos megvilágítási standardokat, például a D65-öt és a D50-et referenciaértékként.

Szín- és semleges árnyalat-mérés. Vegyen fel egy szokásos 24-színű kalibrációs céltáblát, például egy X-Rite ColorChecker-t, valamint egy szürkeárnyalatos céltáblát minden megvilágítási kombináció alatt. Számítsa ki a színeltéréseket egy olyan metrika segítségével, mint a CIEDE2000 (ΔE₀₀). Finomítsa a színkorrekciós mátrixokat (CCM) és a keresőtáblákat (LUT) addig, amíg a mérések a projekt elfogadási határain belül maradnak.

Az egyezményes gyártási tételként történő konzisztencia ellenőrzése. Integrálja az elfogadott kalibrációs paramétereket a gyártási folyamatba. Automatizált mintavétellel ellenőrizze a színeltérést, a fehér egyensúly eltérését és a válaszkonstanciát a tételként történő gyártás során. Ezek az ellenőrzések segítenek eldönteni, hogy a gyártási modulok reprodukálják-e az elfogadott minta teljesítményét.

Hogyan segít egy integrált kamerafejlesztő csapat

A szín pontosítása vegyes megvilágítás mellett a szenzor kiválasztásától, a modul tervezésén át a meghajtófejlesztésen, az ISP hangoláson, a rendszerintegráción és a gyártási kalibráción keresztül minden egyes döntéstől függ. Egy színprobléma, amely látható a végső képen, bármelyik ebben a láncban szereplő lépésből eredhet.

Kameramodulokat és főlapokat tervezünk és gyártunk. Az alkalmazástól függően értékeljük a szenzorlehetőségeket, kiválasztjuk a lencséket és az optikai szűrőket, valamint a modult a készülék mechanikai követelményeihez igazítva tervezzük.

A meghajtófejlesztési munkánk magában foglalja a szenzormeghajtó átültetését, a regiszterszintű hibakeresést, valamint a projekt megvilágítási, hőmérsékleti és képkockasebességi követelményeinek megfelelő stabilitás-tesztelést. Emellett az ISP-t is hangoljuk az adott alkalmazásra, beleértve az automatikus fehérkiegyensúlyozást, a színkorrekciós mátrixokat, a 3D LUT-okat, a zajcsökkentést, valamint az HDR vagy WDR funkciókat. A vevő képfogadási kritériumai irányítják ezt a munkát.

Ugyanaz a csapat tudja végigvinni a projektet az igények és az alkatrészek kiválasztásától kezdve a prototípus-készítésen, a képbeállításon, a gyártáson és az egyezőség-ellenőrzéseken keresztül. Ha van egy célzott megvilágítási környezete, vagy színproblémája egy meglévő rendszerben, ossza meg velünk az igényeit vagy mintaképeit a [email protected] címen.