OAK-D dybdefølende AI-kamera blir mindre og lettere

OAK-D er et åpen kildekode, fullfarge dybdesensorkamera med innebygde AI-funksjoner, og det er nå en crowdfunding-kampanje for en nyere, lettere versjon kalt OAK-D Lite. Den nye modellen gjør alt den forrige kunne gjøre, og kombinerer maskinsyn med stereo dybdeføling og en evne til å kjøre svært komplekse bildebehandlingsoppgaver ombord, og frigjør verten fra alt som er involvert.

Et eksempel på funksjonssporing i sanntid, nå i 3D takket være integrert dybdeføling.

OAK-D Lite-kameraet er faktisk flere elementer sammen i én pakke: et fullfarge 4K-kamera, to gråskalakameraer for stereodybdeføling og innebygd AI-maskinsynsbehandling med Intels Movidius Myriad X-prosessor. Å knytte alt sammen er en åpen kildekode-programvareplattform kalt DepthAI som pakker kameraets funksjoner og muligheter sammen til en enhetlig helhet.

Målet er å gi innebygde systemer tilgang til menneskelignende visuell persepsjon i sanntid, som i sin kjerne betyr å oppdage ting og identifisere hvor de er i det fysiske rommet. Den gjør dette med en kombinasjon av tradisjonelle maskinsynsfunksjoner (som kantdeteksjon og perspektivkorreksjon), dybdeføling og muligheten til å plugge inn forhåndstrente CNN-modeller (convolutional neural network) for komplekse oppgaver som objektklassifisering, poseringsestimering eller håndsporing i sanntid.

Så hvordan brukes det? Praktisk sett er OAK-D Lite en USB-enhet beregnet på å kobles til en vert (som kjører et hvilket som helst operativsystem), og teamet har lagt ned mye arbeid i å gjøre det så enkelt som mulig. Ved hjelp av en nedlastbar applikasjon kan maskinvaren være oppe og gå med eksempler på omtrent et halvt minutt. Integrering av enheten i andre prosjekter eller produkter kan gjøres i Python ved hjelp av DepthAI SDK, som gir funksjonalitet med minimal koding og konfigurasjon (og for mer avanserte brukere er det også en full API for tilgang på lavt nivå). Siden visjonsbehandlingen gjøres ombord, kan til og med en Raspberry Pi Zero brukes effektivt som vert.

Det er en ting til som forbedrer brukervennligheten, og det er det faktum at støtte for OAK-D Lite (så vel som den forrige OAK-D) er lagt til en programvarepakke kalt Cortic Edge Platform (CEP). CEP er et blokkbasert visuelt kodesystem som kjører på en Raspberry Pi, og er rettet mot alle som raskt ønsker å prototyper med AI-verktøy i et primært visuelt grensesnitt, og gir enda en måte å lime et prosjekt sammen.

Tidligere i år så vi OAK-D brukt i et system for å visuelt identifisere ugress og estimere biomasse i landbruket, og det er spennende å se en ny modell slippes. Hvis du er interessert, er OAK-D Lite tilgjengelig med en betydelig rabatt under Kickstarter-kampanjen.

Kilde: https://hackaday.com/2021/10/15/oak-d-depth-sensing-ai-camera-gets-smaller-and-lighter/