Ievads
Kad akameras modulisuzņem attēlu, neapstrādātus datus nocmos kameras modulissensors vēl nav skatāms attēls. Tas ir jāapstrādā – demosaicēts, baltā balanss, trokšņu samazināšana un asināšana. To veic anAttēla signālu procesors (ISP). ISP var būt īpaša mikroshēma (aparatūras ISP) vai programmatūras bibliotēka, kas darbojas galvenajā procesorā (programmatūras ISP). Šis raksts salīdzinaaparatūras ISP pret programmatūras ISP, to plusi un mīnusi, un kas ir piemērots jūsu lietojumprogrammai.
Kas ir ISP?
ISP pārvērš neapstrādātus Bayer datus galīgajā attēlā. Galvenie darbi:
Demosaicinēšana – interpolējoša krāsa.
Baltās krāsas balanss – neitralizē krāsu nometumus.
Trokšņa samazināšana – graudu noņemšana.
Asināšana – malu uzlabošana.
Gamma korekcija – spilgtuma regulēšana.
Labs interneta pakalpojumu sniedzējs var padarīt pieticīgu sensoru lieliski izskatīties; slikts interneta pakalpojumu sniedzējs var sabojāt augstākās klases pakalpojumus4K kameras modulis.
Aparatūras ISP — īpaša mikroshēma
Aparatūras ISP ir atsevišķa mikroshēma vai bloks sensora vai procesora iekšpusē. Tas darbojas reāllaikā, izmantojot ļoti mazu CPU jaudu.
Priekšrocības
- Zems latentums– nekavējoties apstrādā katru kadru; ideāli piemērots tiešraides video (endoskopija, droni).
- Zema jauda– speciālās shēmas patērē daudz mazāk enerģijas nekā centrālais procesors.
- Konsekventa– fiksēts algoritms, bez mainīguma.
- Izlādē centrālo procesoru– atstāj galveno procesoru brīvu citu uzdevumu veikšanai.
Trūkumi
- Fiksēts– pēc izgatavošanas nevar atjaunināt vai noregulēt.
- Pievieno izmaksas– nepieciešama papildu mikroshēma vai sarežģītāks sensors.
- Mazāk elastīgs– var neatbalstīt pielāgotas krāsu līknes vai uzlaboto trokšņu slāpēšanu.
Aparatūras ISP ir izplatīts viedtālruņos, darbības kamerās un daudzosHD kameras modulisproduktiem.
- Programmatūras ISP — apstrāde galvenajā CPU
Programmatūras ISP ir bibliotēka (OpenCV, libraw vai pielāgots kods), kas darbojas uz resursdatora CPU, GPU vai DSP.
Priekšrocības
- Elastīgs- Algoritmus var atjaunināt, lai uzlabotu kvalitāti vai pievienotu funkcijas.
- Nav papildu aparatūras- samazina komponentu izmaksas.
- Pielāgojams– varat ieviest patentētu krāsu zinātni vai uzdevumam raksturīgu apstrādi (medicīnas, mašīnredzes).
- Potenciāli jaudīgāks– ar spēcīgu centrālo procesoru varat palaist uz AI balstītu trokšņu samazināšanu vai uzlaboto HDR.
Trūkumi
- Augsta CPU slodze– var ietekmēt citus uzdevumus, īpaši iegultās sistēmās.
- Lielāka jauda– attēlu apstrāde ar vispārējas nozīmes centrālo procesoru patērē vairāk enerģijas.
- Lielāks latentums– atkarīgs no CPU ātruma; var izraisīt rāmja nokrišanu.
Programmatūras ISP ir izplatīta datoru kamerās,4K kameras modulissistēmas ar jaudīgiem procesoriem un prototipiem.
Salīdzināšanas tabula
| Aspekts | Aparatūras ISP | Programmatūras ISP |
|---|---|---|
| Latentums | Ļoti zems (µs) | Augstāks (ms) |
| Jauda | Zems | Augsts |
| CPU slodze | Nav | Nozīmīgi |
| Elastība | Fiksēts | Pilnībā elastīgs |
| Izmaksas | Pievieno mikroshēmu | Nav mikroshēmas, bet var būt nepieciešams ātrāks CPU |
| Vislabākais priekš | Reāllaika, ar akumulatoru darbināms | Uz personālo datoru balstīta, pielāgota apstrāde |
Piemēri
- HD kameras modulis ar aparatūras ISP– TipisksHD kameras modulis(1080p) USB tīmekļa kamerai vai endoskopam bieži integrē aparatūras ISP. Tas izvada apstrādātu YUV vai MJPEG, un resursdators parāda tikai attēlu. Tas ir vienkārši, mazjaudas un darbojas jebkurā datorā.
- 4K kameras modulis ar programmatūras ISP – A 4K kameras moduliskas izvada neapstrādātus Bayer datus, resursdatorā ir nepieciešams programmatūras ISP. Tas ir izplatīts augstākās klases mašīnredzes vai pielāgotās iegultās sistēmās, kur izstrādātājs vēlas pilnīgu kontroli. Resursdatoram ir jābūt ātram centrālajam procesoram (piemēram, NVIDIA Jetson, galddators).
- CMOS kameras modulis - abas opcijas – A cmos kameras modulisvar pasūtīt ar vai bez aparatūras ISP. Neapstrādāta produkcija nodrošina elastību; aparatūras ISP nodrošina vienkāršību.
Kuru jums vajadzētu izvēlēties?
| Jūsu prioritāte | Ieteikums |
|---|---|
| Zema jauda, ilgs akumulatora darbības laiks | Aparatūras ISP |
| Zemākais latentums | Aparatūras ISP |
| Maksimāla elastība, pielāgoti algoritmi | Programmatūras ISP |
| Vienkārša datora integrācija | Aparatūras ISP |
| Mazs produkta izmērs (bez papildu procesora) | Aparatūras ISP |
| 4K video ar zemu izmaksu centrālo procesoru | Aparatūras ISP (pretējā gadījumā centrālajam procesoram būs grūtības) |
Sirsnīgie kameras moduļi
Uzņēmums Sirsnīgs, mēs piedāvājamkameras modulisrisinājumi gan ar aparatūras, gan programmatūras ISP:
- Aparatūras ISP– Integrēts mazjaudas, plug-and-play darbībai.
- Programmatūras ISP- Neapstrādāti izvades moduļi pielāgotai apstrādei jūsu resursdatorā (ARM, FPGA, PC).
- HD kameras modulis– Pieejams ar aparatūras ISP vai neapstrādātu izvadi.
- 4K kameras modulis– vairumam lietotāju ieteicams aparatūras ISP; neapstrādāts ekspertiem.
Kopsavilkums
Izvēle starpaparatūras ISP pret programmatūras ISPir atkarīgs no jaudas, latentuma, elastības un CPU resursiem. Aparatūras ISP ir ātrs, efektīvs un vienkāršs — lieliski piemērots darbam ar akumulatoruHD kameras modulisierīces. Programmatūras ISP nodrošina pilnīgu kontroli un jaunināšanu, taču tam ir nepieciešams jaudīgs procesors un tas patērē vairāk enerģijas. Par a4K kameras modulis, aparatūras ISP bieži ir praktiska izvēle, lai izvairītos no resursdatora pārslodzes. To izpratne palīdz izvēlēties pareizocmos kameras modulisjūsu projektam.





