Hversu mikið DDR-minni þarf marga- myndavélar AI-sjónkerfi? (Með valtafla fyrir RK3576)

Með hröðum framförum í AI-sjónkerfjum hafa lausnir með mörgum myndavélum (tveggja, fjórra eða jafnvel fleiri myndavéla) verið víða notuð í tilvikum eins og gögnasafn, öryggisumferð, iðnaðarinspektion, skynjun á róbótum og enda-reikningur. Margar verkefnalausnir lendast í algengum villu við val á vélbúnaði: að einungis lita á reiknistyrk chipsins en hunsa minnisstillingu. Þetta leidir að lokum til vandamála eins og myndfalla, dreginn úr AI-útreikningum og kerfisfalli.

Er stærra DDR-minni alltaf betra? Já, frá sjónarhóli afkvæmis og stöðugleika. Hins vegar er neyslan augljós — mikil áhrif á kostnað, sérstaklega miðað við nýlegan hækkun á DDR-verði. Að jafna kostnað við raunverulegar kröfur verkefnisins verður því lykilatriði við val á lausn.

Lítum nú á algengustu villuna við ákvörðun á DDR-stærð: minnisnotkun getur virðst lág undir venjulegum aðstæðum, en hún getur stigið upp í hámarksgildi við skjóta burst af samhliða verkefnum og þannig valda kerfisfalli. Margar liðsgruppur nota meðalminnisnotkun til að meta vélbúnað. Tökum dæmið um algengt myndavélarhringinn AR0234: ein 1080P myndavéla notar lítil minni í biðstöðu. Þegar hins vegar heilur ferlið fyrir taka-myndvinnslu-AI útreikninga-kóðun er keyrt, getur hámarksminnisnotkunin orðið desímetrar af MB á hverjum rás. Fyrir 4K myndavél getur hámarksminnisnotkunin á hverri rás yfirgengið 100 MB. Jafnvel venjuleg HTTP beiðni notar nokkrar MB á hverja tengingu. Þessi einstök álag virðast litil, en þau safnast fljótt saman þegar margar myndavélar og verkefni eru virkjar samtímis. Þetta getur valdið OOM (Out-of-Memory), sem leidir til brottra ferla og kerfisfalls.

Hvar er minnið notað í fjölmýndavéla AI-sjónkerfum?

Minni á brjáðssýnibúnaði er ekki einungis notað af AI-gerðum. Það er deilt á milli myndavöktunar, fyrirvinnslu, AI-útreikninga, kerfisþjónusta og forritsverkfæra. Minnisálag hækkar með hverjum auknum myndavangi.

1. Myndabuffrar (stærsta heildarálag) Óbeinhar myndir, YUV-myndir og stórfærðar myndir frá hverjum myndavöng eru minnismiklar. Fyrir AR0234 sem keyrir við 1080P@30fps tekur ein YUV-mynd nokkrar MB. Til þess að koma í veg fyrir myndfall heldur kerfið í margmynda hringsbuffrum, sem aukar frekar minnisnotkunina. Með því að búa til margar myndavariantur (upprunalegar, litlar myndir, úttskornar myndir) myndast aukalegar myndabuffrar. Minnisnotkun margfaldast þegar margir myndavöngir senda samhliða.

2. Álag frá ISP og fyrirvinnslu mynda ISP-inn er sjálfstætt vélbúnaðarhröðubak, sem framkvæmir hljóðdrægni, litagreiðslu, skekkjagreiðslu, snúning, klippingu og sniðbreytingu. ISP-inn inniheldur aðeins takmarkaðan skyndiminnisgeyma á chipinu án stórra rammar fyrir myndasafn. Því verða tímabundin minnisbiðrými skilgreind í DDR fyrir margar aðgerðir. Fleiri myndavélar þýða meiri álag á ISP-inn og hærri kröfur til DDR-getu.

3. Minni fyrir AI-módelmatstaðfestingu AI-matstaðfesting notar minni í tveimur hlutum. Fyrst eru vægi módelanna: stærri módelþættir leiða til hærri minnisnotkunar. Á þetta báta er væginn bara hlaðinn einu sinni við uppsetningu módelns; minnisnotkunin vex ekki með fleiri myndavélum eða ástandi í keyrslutímanum.

Er minni ekki áhrifaríkt í framkvæmdartímabili? Ekki alveg. Þetta leiðir okkur að öðru hlutinum: millistöðu eiginleikahólfum sem myndast í framkvæmdartímabili. Hver sjónvörpukanna krefst sín eigin reiknibuffurs, sem hefur áhrif á heildarminnisnotkun. Samstillt AI-framkvæmd yfir margar sjónvörpur krefst margra óháðra reiknibuffra. Því fleiri sjónvörpukannir, því meiri minnisálagan fyrir framkvæmdarbuffr.

4. Kerfi, keyrslustýri og miðlunarmjúkvara Tökum RK3576-sjónlausnina okkar sem dæmi. Grunnkerfisminni er notaður af Linux kjarnanum, RK-miðillýsingum, RKMPP-miðillrammanum, NPU-lysingum, kerfisloggunum og keyrandum ferlum. Í margra sjónvörpukanna útfærslum bæta miðillrammar og myndbandaskráning (H.264 / H.265) verulega við minnisálagan. Virkjun á margra rásanna skráningu og geymslu valdar skjótt aukinni minnisálagu.

Mikilvægt athugasemd: Þetta vísar til virkra minnis (DDR RAM), ekki eMMC-geymslu. eMMC geymir aðeins kóðuð myndbandsskráar.

5.Notkun -Lagat viðskipta minnisgeymsla Forritunarlogík, þar á meðal greining á niðurstöðum, fylgni mörgu hlutum, tilkynningu gagna, staðbundinni skyndiminnisgeymslu og vistaðum myndum, notar minni. Til dæmis geymir fylgnialgoritmar gögn um hluti yfir margar myndræmar rammar. Fleiri myndavélar og fleiri hlutir sem fylgdst er með skapa stærri gagnasafn og hærra minnisnotkun á forritanivá.

Raunveruleg minnisgeta á RK3576-stýrikerfisstöðinni

RK3576 er almennt notað heimilislega framleiðslustýrikerfi fyrir grænsvæðis-AI með 6 TOPS af NPU-getu, sem er vel hentugt fyrir AI-myndvinnslu með mörgum myndavélum. Fyrirtækið okkar hefur margar fullkomnar massuppskriftarvörur sem styðja 1–6 myndavélar til að uppfylla ýmsar verkefniskröfur. 4 GB DDR er algengasta massuppskriftarstillingin, en önnur DDR-stærð er einnig studd fyrir mismunandi álag.

Tölfræðitabelan hér að neðan gildir fyrir algengar 1080p–4K myndavélar á markaðinum:

Ef þú ert ekki viss um hagkvæmasta minnisuppsetninguna, vinsamlegast hafðu samband við [email protected]. Við munum veita sérsniðna mat á lausn byggt á fjölda myndavistara, upplausn, viðskiptafræðilegum reikniriti og keyrsluþyngd.