Sony onthult camerasensor met geïntegreerde AI-processor

Sony heeft een nieuwe camerasensor geïntroduceerd, genaamd de IMX500. Hij is bij uitstek geschikt voor camera's die constant aan moeten kunnen staan, zoals bewakingscamera's. Er zit namelijk ook een geïntegreerde AI-processor op dezelfde package.

Deze AI-chip zit direct onder de sensor en integreert naast Sony's digital signal processor ook cachegeheugen. Hij kan de data die de beeldsensor verstuurt omzetten in metadata. Het geheel moet de eerste beeldsensor (of in zekere zin een 'beeld-soc') zijn die dit kan. Op die manier hoeft er maar zeer weinig data te verstuurd te worden, om zo geheugen en kostbare bandbreedte in bijvoorbeeld netwerken met bewakingscamera's te besparen. Een voorbeeld van een toepassing is het real-time herkennen van objecten, waarna de data bijvoorbeeld gebruikt kan worden voor het tellen van aantallen en voorraden, drukte in bijvoorbeeld openbare ruimten meten, en het meten en analyseren van consumentengedrag. Doordat alles binnen de chip zelf verwerkt wordt en alléén de benodigde data verstuurd wordt moet deze toepassing de privacy van de gefilmde mensen beter verzekeren.

De beeldsensor zelf gaat door het leven als de IMX500, en de package met beide chips heet IMX501. De sensor heeft een formaat van 1/2,3-inch en heeft een maximale resolutie van 12,3 megapixel, waarbij niet-vereenvoudigde beeldinformatie met 60 frames per seconde verstuurd kan worden (bij een resolutie van 4056 x 2288 pixels). Na het gebruik van de chip met kunstmatige intelligentie kan de metadata worden verstuurd met een verversingssnelheid van 30 Hz.