Sony onthult camerasensor met geïntegreerde AI-processor

10 reacties

Sony heeft een nieuwe camerasensor geïntroduceerd, genaamd de IMX500. Hij is bij uitstek geschikt voor camera's die constant aan moeten kunnen staan, zoals bewakingscamera's. Er zit namelijk ook een geïntegreerde AI-processor op dezelfde package.

Deze AI-chip zit direct onder de sensor en integreert naast Sony's digital signal processor ook cachegeheugen. Hij kan de data die de beeldsensor verstuurt omzetten in metadata. Het geheel moet de eerste beeldsensor (of in zekere zin een 'beeld-soc') zijn die dit kan. Op die manier hoeft er maar zeer weinig data te verstuurd te worden, om zo geheugen en kostbare bandbreedte in bijvoorbeeld netwerken met bewakingscamera's te besparen. Een voorbeeld van een toepassing is het real-time herkennen van objecten, waarna de data bijvoorbeeld gebruikt kan worden voor het tellen van aantallen en voorraden, drukte in bijvoorbeeld openbare ruimten meten, en het meten en analyseren van consumentengedrag. Doordat alles binnen de chip zelf verwerkt wordt en alléén de benodigde data verstuurd wordt moet deze toepassing de privacy van de gefilmde mensen beter verzekeren.

Sony IMX501

De beeldsensor zelf gaat door het leven als de IMX500, en de package met beide chips heet IMX501. De sensor heeft een formaat van 1/2,3-inch en heeft een maximale resolutie van 12,3 megapixel, waarbij niet-vereenvoudigde beeldinformatie met 60 frames per seconde verstuurd kan worden (bij een resolutie van 4056 x 2288 pixels). Na het gebruik van de chip met kunstmatige intelligentie kan de metadata worden verstuurd met een verversingssnelheid van 30 Hz.

3D stacked image sensor

Lokaal verwerkt beeld met AI toepassingen

    IMX500 (chipnaam) IMX501 (naam package
Effectieve pixels   4056 (H) x 3040 (V), ongeveer 12,3 megapixels
Beeldgrootte   Diagonaal: 7,857 x mm (1/2,3-inch-type)
pixelgrootte   1.55 μm x 1.55 μm
Framerate Full pixel 60 fps
Video 4K (4056 x 2288) 60 fps
1080p 240 fps
Full/video + AI-processing 30 fps
Metadata-output 30 fps
Gevoeligheid (F5.6 stadaardwaarde)   ongeveer 250LSB
Sensor-saturatie signaal (minimaal)   ongeveer 9610e-
Voeding analoog 2,7 V
  digitaal 0,84 V
  interface 1,8 V
Main functions   AI-processing-functionaliteit, ISP, HDR-opnames
Output   MIPI D-PHY 1.2 (4-lane) / SPI
Color filter array   Bayer array
Outputformaat   Image (Bayer RAW), ISP output (YUV/RGB), ROI, metadata
Package   - keramisch, LGA
    12,5 mm (H) x 15,0 mm (B)

 

« Vorig bericht Volgend bericht »
0
*