Prophesee & Sony onthullen gestapelde event-based vision-sensor met record HDR en ultra-kleine pixels

PARIJS — Prophesee, de Parijs-gebaseerde pioneer van neuromorphische visiesystemen, en Sony Corp. kondigden op de International Solid-State Circuits Conference (ISSCC) in San Francisco een breekbare gestapelde event-based vision-sensor aan die Prophesee's event-gedreven architectuur combineert met Sony's geavanceerde gestapelde CMOS-technologie.

Ontworpen vanaf de grond op voor asynchrone event-detectie, levert de sensor de industriële kleinste pixelgrootte van 4,86 µm en een uitzonderlijke hoge-dynamische range van 124 dB, wat betrouwbare werking mogelijk maakt van heldere daglicht tot diepe nachtscènes (tot 40 mLx).

Pixelchip (links) en logica-chip (bron: Prophesee)

In een gestapelde configuratie worden de bovenste pixellaag en onderste logica-laag gebonden via koper-naar-koper-interconnects, wat een dichte 40nm-proces toestaat dat een 1280×720 HD-resolutie bereikt terwijl een hoge apertuursverhouding van tot 77% behouden blijft. Deze architectuur ondersteunt ook een efficiënte asynchrone delta-modulatie signaalverwerkingspijplijn die veranderingen in luminantie vastlegt als discrete events.

Voor de eerste keer biedt de samenwerking de mogelijkheid om AI-sensing en AI-verwerking direct op of nabij de sensor te integreren, wat de weg baant voor werkelijk intelligente edge-apparaten zoals autonoom voertuigen, industriële robots en geavanceerde machine-vision-systemen.

Strategische Partnerschap

Sony, de wereldleider in CMOS-beeldsensoren, brengt zijn productie-excellentie en IP-portefeuille naar het partnerschap, wat Prophesee's technologie commerciële geloofwaardigheid geeft. CEO Luca Verre merkt op dat het verbond in 2017 begon en dat de eerste monsters van de gestapelde sensor voor 2020 gepland stonden.

Voor Sony signaleert het partnerschap een strategische verschuiving naar „sensing” in plaats van puur imaging. Het spiegelt de impact van de 2015-overname van SoftKinetic, die Sony's „DepthSense” time-of-flight (ToF)-oplossingen in Android-smartphones mogelijk maakte. De event-based sensor positioneert Sony om rijker datastromen in automotieve en industriële markten te vangen, waar consumenten steeds diepere sensorische inzichten eisen.

Expert Inzicht

Yole Développement's Pierre Cambou vergelijkt de samenwerking met „het openen van Pandora's doos.” Hij benadrukt het potentieel voor toekomstige gestapelde ontwerpen die neuronen, geheugen en verwerking integreren, wat leidt tot AI-geïntegreerde beeldsensoren capabel van on-the-fly verbetering en directe event-based output.

Pierre Cambou, Yole Développement

Door Prophesee's neuromorphische pixel-ontwerp te combineren met Sony's fabricagemogelijkheden, vertegenwoordigt de gezamenlijke sensor een significante sprong vooruit in visietechnologie, met hoge dynamische range, lage ruis en event-gedreven werking die lijnt met de toekomst van AI-geïntegreerde edge-computing.

Naarmate beide bedrijven de sensor naar de markt brengen, belooft het partnerschap nieuwe commerciële kansen te ontgrendelen en een nieuwe benchmark te zetten voor visiesystemen wereldwijd.