Nan lavi chak jou nou an, nou ap abitye wè vibran, imaj detaye. Sepandan, gen yon sekrè kache: detèktè kamera yo natirèlman koulè - avèg. Chak pixel ka sèlman detekte klète, pa koulè. Konvèti sa a nwa - ak - done blan nan yon imaj koulè mande pou yon sistèm konplèks. Nan kè a nan sistèm sa a bay manti modèl la Bayer (Bayer filtre) ak imaj la siyal processeur (ISP). De eleman sa yo aji tankou sèvo ak je kamera a, k ap travay ansanm pou fòme pwosesis la soti nan siyal limyè anvan tout koreksyon nan imaj final la.
Kòm yon konsiltan ki espesyalize nan modil kamera, atik sa a pral bay yon nan - analiz pwofondè nan modèl la Bayer, revele koule nan pwosesis ISP, ak eksplore ki jan teknoloji sa yo nwayo dirèkteman enpak aplikasyon tankou deteksyon objè nan sistèm vizyon entegre. Nou pral bay Sur ekspè nan pèspektiv yon enjenyè a, ede ou konprann chak lyen kle nan chèn nan imaj.
Ki sa ki Bayer?
Pou konprann modèl la Bayer, ou premye bezwen konprann ki jan kamera dijital travay. Yon Capteur kamera ki konpoze de dè milyon de diodes fotosensib (piksèl). Lè foton yo frape piksèl sa yo, yo jenere yon chaj elektrik ki gen grandè pwopòsyonèl ak entansite limyè a. Sepandan, piksèl sa yo pa ka distenge ant koulè limyè; Yo sèlman anrejistre klète li yo.
Modèl la Bayer, souvan yo rele yon filtre Bayer, se yon solisyon roman. Li konsiste de yon etalaj ti filtè - wouj (r), vèt (g), ak ble (b) - jisteman mete sou chak pixel. Sa a etalaj filtre pèmèt chak pixel resevwa ak dosye sèlman entansite a nan koulè a espesifik nan limyè anba li. Pou egzanp, yon pixel ki kouvri pa yon filtre wouj sèlman dosye klète nan limyè wouj.
Se konsa, pwodiksyon an done anvan tout koreksyon pa Capteur a se pa yonKoulè RGB Imaj, men yon modèl mozayik kamayeu, yo konnen kòm "bayer done anvan tout koreksyon." Chak pixel nan done sa a gen enfòmasyon ki soti nan yon sèl kanal koulè.
Poukisa vèt se de fwa nan modèl la Bayer
Si ou gade byen nan yon modèl tipik Bayer, ou pral remake ke gen de fwa tankou anpil piksèl vèt kòm piksèl wouj ak ble. Sa a se ke yo rekonèt kòm yon aranjman RGGB (oswa GRBG, BGGR, elatriye).
Konsepsyon sa a pa gen okenn aksidan; Li baze sou pwopriyete fizyolojik nan je imen an. Retin imen an se pi sansib a limyè vèt, sa ki lakòz pèsepsyon nou nan klète (oswa "gri") nan sitou soti nan Chèn vèt la. Pa allocation plis piksèl nan vèt, kamera a se kapab pran pi rich enfòmasyon klète, sa ki lakòz pi wo klè ak mwens bri lè rekonstwi imaj la, finalman fè imaj la parèt pi natirèl ak nèt.
GGB vs diferans BGGR
Gen plizyè aranjman modèl Bayer, ak RGGB ak BGGR ke yo te de pi komen an. Pandan ke tou de swiv "doub vèt" prensip la, aranjman nan espesifik diferan.
Nan aranjman RGGB, piksèl wouj ak ble yo mete dyagonalman anfas piksèl vèt yo. Nan aranjman BGGR la, piksèl vèt yo mete dyagonalman anfas piksèl wouj ak ble. Chwa a nan aranjman sa yo afekte pwosesis la ki vin apre ISP, patikilyèman algorithm nan demosaicing.
Pou egzanp, aranjman diferan afekte konbinezon an nan piksèl adjasan pandan kalkil entèpolasyon. Pou sistèm vizyon entegre, chwa a nan modèl Bayer souvan depann sou konsepsyon an chip ISP ak mande pou pyès ki nan konpitè ak kowòdinasyon lojisyèl asire bon jan kalite imaj final la.
Ki sa ki se yon ISP (imaj processeur siyal)?
AImaj siyal processeur (ISP)se sèvo sistèm kamera a. Travay prensipal li se resevwa done brut Bayer anvan tout koreksyon soti nan Capteur a, epi, nan yon tiyo pwosesis konplèks, konvèti li nan yon fòma imaj estanda ke nou wè, pare pou ekspozisyon oswa analiz. Yon ISP kapab yon chip otonòm oswa entegre nan chip nan kontwòl prensipal la.
Yon ISP efikas se kle nan yon segondè - modil kamera pèfòmans. Chak etap li okipe se kritik ak dirèkteman detèmine bon jan kalite a imaj final la.
ISP pwosesis tiyo
Yon tiyo konplè ISP tipikman gen ladan plizyè douzèn etap pwosesis. Nou pral mete aksan sou plizyè etap kle isit la:
1. Move koreksyon pixel
Pandan pwosesis manifakti a, detèktè yo ka devlope piksèl endividyèl move, ki se swa ki pa - lumineux oswa pèmanan lumineux. Premye etap la nan ISP a se idantifye ak repare piksèl sa yo move, ranplase done yo pa interpolating soti nan ki antoure piksèl.
2. Koreksyon nivo nwa
Menm nan fènwa konplè, Capteur a toujou pwodui yon siyal fèb elektrik akòz "aktyèl fè nwa." ISP a soustraksyon sa a fiks "nivo nwa" asire ke piksèl nwa yo se vrèman zewo, kidonk amelyore ranje dinamik imaj la.
3. Denoising
Lè Capteur a se nan limyè ki ba, li jenere yon gwo kantite lajan nan bri o aza elektwonik. ISP a sèvi ak algoritm konplèks yo fè distenksyon ant detay imaj soti nan bri ak Lè sa a, aplike rediksyon bri. Sa a ka siyifikativman amelyore pite imaj, men rediksyon bri twòp kapab tou efase detay.
4. Demosaicing
Sa a se youn nan fonksyon debaz yo nan ISP la. Algorithm nan demosaicing interpolates enfòmasyon ki nan chak pixel nan vwazen wouj, vèt, ak piksèl ble dedwi valè a konplè RGB nan ki pixel. Bon jan kalite a nan algorithm nan demosaicing dirèkteman detèmine repwodiksyon an koulè ak detay nan imaj final la.
5. Auto Balans Blan
Diferan sous limyè (tankou limyè solèy la, ekleraj fliyoresan, ak ekleraj enkandesan) emèt limyè ak tanperati koulè diferan. Auto fonksyon an balans blan analize distribisyon an koulè nan imaj la ak otomatikman ajiste benefis la nan wouj, vèt, ak chanèl yo ble asire ke objè blan yo avèk presizyon rann blan anba nenpòt ki sous ekleraj. Pwosesis sa a dinamik ak konplèks se youn nan pwen yo vann debaz nan ISP la.
6. Koulè Koreksyon (CCM)
Menm apre balanse blan, repwodiksyon koulè yon kamera a ka pa egzat. ISP a sèvi ak yon matris koulè nan plis koulè kòrèk, kat espas natif natal kamera Capteur a nan yon espas koulè estanda (tankou SRGB) asire konsistans koulè atravè aparèy diferan.
7. Koreksyon Gamma
Koreksyon Gamma se yon pwosesis linear pou klète imaj pou koresponn ak pèsepsyon vizyèl je imen an, ki fè zòn klere ak nwa parèt pi natirèl ak pi rich nan pwofondè.
8. file ak amelyorasyon kwen
ISP a amelyore bor nan imaj, fè yo parèt pi klè ak nèt. Sepandan, sa a egzije pou kontwòl egzak, kòm sou - file ka prezante anòmal zafè file.
Enpak la nan yon ISP sou vizyon òdinatè
Pou enjenyè vizyon entegre, yon ISP se pi plis pase jis yon zouti pou anbelisman imaj. Chak etap pwosesis nan ISP a dirèkteman enpak pèfòmans nan en algoritm vizyon òdinatè. Inyore wòl ISP a ka mennen nan defo fatal nan aplikasyon pou tankou deteksyon objè.
"Nwa bwat" efè a nan ISP la
Anpil enjenyè erè wè ISP a kòm yon "bwat nwa," asepte li nan sèlman responsab pou pwodwi yon "bon - kap" imaj. Sepandan, pandan ke kèk pwosesis ISP ka amelyore bon jan kalite vizyèl, li kapab tou entèfere ak algoritm vizyon òdinatè.
Pou egzanp, tro agresif rediksyon bri ISP ka lis soti tèkstur sibtil ak detay ki nan imaj la, ki se kritik pou algoritm deteksyon objè.
Defi a nan Auto Balans Blan
Enstabl oto balans blan se yon pwen doulè pi gwo nan vizyon òdinatè. Anba chanje kondisyon ekleraj, si oto balans blan echwe yo avèk presizyon ajiste tanperati koulè, li ka lakòz yon jete koulè nan imaj la. Sa a ka rann modèl deteksyon objè ki resevwa fòmasyon efikas nan reyèl - aplikasyon pou mond, menm jan yo ka kapab detekte objè ak jete a.
Ki jan yo adrese sa a
Pou asire fyabilite nan algoritm vizyon òdinatè, enjenyè bezwen yon ISP optimisé pou aplikasyon pou vizyon. Sa vle di ke paramèt ISP a dwe kontwole ak reglabl, sa ki pèmèt enjenyè amann - melodi tiyo a pwosesis imaj pou senaryo aplikasyon espesifik (tankou limyè klere deyò oswa ki ba - kondisyon limyè nan mitan lannwit). Anplis de sa, li enpòtan yoChwazi yon modil kameraSa sorti done Raw Bayer. Sa pèmèt enjenyè yo fè pwosesis ISP nan lojisyèl backend, bay maksimòm fleksibilite ak kontwòl.
Rezime
Modèl la Bayer ak imaj processeur siyal yo se poto yo nan chèn D 'dijital la, k ap travay ansanm transfòme siyal limyè anvan tout koreksyon nan enfòmasyon imaj itil. Konprann chak etap pwosesis nan ISP a ak rekonèt enpak dirèk li yo sou en algoritm vizyon òdinatè se esansyèl pou chak enjenyè vizyon entegre. ISP a pa sèlman kontribye nan estetik yo nan imaj, men tou detèmine siksè nan aplikasyon pou AI tankou deteksyon objè ak rekonesans imaj.
Muchvision ede ak optimize ISP
Èske ou gen difikilte nan modil kamera ISP optimize pou pwojè ou a?Kontakte ekip ekspè nou an jodi aEpi n ap ofri ou ak seleksyon pwofesyonèl siyal processeur imaj ak sèvis personnalisation ede pwojè vizyon entegre ou a reyisi!
