Suuret kielimallit näyttävät nyt, mihin ollaan menossa kameravalvonnassa. Kun valvontakameraan lisätään tehokas, mutta vähävirtainen tekoälyprosessori, kameralle voidaan esittää kuvaan liittyviä hakuja luonnollisella kielellä. Vähän kuin juttelisi ChatGPT:n kanssa.
Asialla on piilaaksolainen Arbarella ja sen uusi 5 nanometrin prosessissa valmistettu CV75S-järjestelmäpiiri. Se hyödyntää konenäön Vision-kielimalleja ja tekoälyyn perustuvaa kuvankäsittelyä tunnistaakseen haluttuja kohteita kuvassa. Lisäksi piiri tekee tämän alan alhaisimmalla virrankulutuksella.
VLM-mallien (vision-language models) energiatehokas prosessointi tekee älykameroista käyttökelpoisia useissa edullisemmissa valvontakameroissa yrityksissä, älykaupungeissa ja vähittäiskaupassa. Arbarella uskoo myös, että tulokkaan ovat tekoälyä hyödyntävät kuluttajien videolaitteet, kuten urheilu- ja konferenssikamerat.
Tyypillinen esimerkki siitä, kuinka CV75S:tä käytetään VLM-prosessointiin yrityskameroissa, on luonnollisen kielen haku. Sitä ajetaan suoraan kamerassa ja sen avulla voidaan etsiä mitä tahansa esinettä tai kohtausta sen kaapatun sisällön joukosta. Multimodaalinen VLM, kuten CLIP-malli (contrastive language–image pre-training) voi selata materiaalia ja tuottaa välittömiä tuloksia ilman, että sitä on erikseen koulutettu kyseiseen kohteeseen tai kontekstiin. Tämä tarkoittaa, että valvontakamera voi suorittaa käyttäjien tarpeisiin räätälöityjä tekoälytehtäviä ilman uudelleenkoulutusta.
Uutuuspiiri perustuu Arbarellan uusimpaan CVflow 3.0 AI -moottoriin. Prosessori tarjoaa kolminkertaisen suorituskyvyn edelliseen sukupolveen verrattuna. Lisäksi CV75S:llä on viimeisimmän sukupolven Ambarellan kuvasignaaliprosessorin, kaksi 1,6 gigahertsin Arm Cortex-A76 -ydintä ja USB 3.2 -liitännät.
Markkinoille tulon nopeuttamiseksi CV75S-perhettä tukee Ambarellan Cooper-kehitystyökaluilla. Äskettäin esitelty alusta tarjoaa kattavia laitteisto- ja ohjelmistoratkaisuja äärimmäisten tekoälyjärjestelmien luomiseen, mukaan lukien tehokkaat, turvalliset ja suojatut laskenta- ja ohjelmisto-ominaisuudet.
Arbarella esitteli CV75S-piirin ISC West -messuilla Las Vegasissa.
