Ambarella, Lumentum en ON Semiconductor onthullen AI-gedreven 3D sensing oplossingen voor next-gen AIoT apparaten

Ambarella, een AI vision silicon bedrijf, Lumentum, een ontwerper en fabrikant van innovatieve optische en fotonische producten, en ON Semiconductor, een leverancier van CMOS image sensor oplossingen, hebben samengewerkt om twee nieuwe gezamenlijke referentieontwerpen te produceren die, aldus ze, "de implementatie van artificial intelligence of things apparaten over verticales versnellen".

De ontwerpen bouwen voort op de bedrijven eerdere gezamenlijke oplossing voor contactloze toegangssystemen.

Door de data van Lumentum's hoogpresterende VCSEL-array illuminators en een ON Semiconductor image sensor te combineren met behulp van Ambarella's AI SoC, kunnen hogere nauwkeurigheidsniveaus en intelligenter besluitvorming worden bereikt in next-generation AIoT apparaten voor biometrische toegangscontrole, 3D elektronische sloten en andere intelligente sensing toepassingen.

Oorspronkelijk bedoeld voor biometrische toegangscontrole en elektronische sloten, kunnen deze nieuwe referentieontwerpen ook de behoeften van slimme steden, slimme gebouwen, slimme huizen en intelligente gezondheidszorg adresseren.

Daarnaast verlaagt het hoge integratieniveau van deze gezamenlijke oplossingen de systeemstroomverbruik en thermische ontwerpseisen aanzienlijk, terwijl veel kleinere productvormfactoren mogelijk worden.

Fermi Wang, president en CEO van Ambarella, zegt: "Ambarella's visie is om AI-verwerking te combineren met 3D en vision sensing om een ambient intelligente toekomst te creëren.

"Deze samenwerking met Lumentum en ON Semiconductor zal de convergentie van AI en IoT verder laten vorderen om een nieuwe generatie toegangscontrolesystemen mogelijk te maken, terwijl nieuwe categorieën ambient sensing producten geïnspireerd worden – allemaal aangedreven door de fusie van sensoren met AI vision processors die intelligenter en onopvallend met mensen interageren om hun steeds evolutieve behoeften te adresseren."

Téa Williams, senior vicepresident en general manager, 3D sensing bij Lumentum, zegt: "Onze nieuwe gezamenlijke oplossingen zullen de nauwkeurigheid van AIoT-apparaten over toepassingsverticales aanzienlijk verhogen – beginnend met biometrische toegangscontrole en elektronische sloten – waardoor ze mensen kunnen herkennen en hun behoeften voorspellen, in plaats van een directe menselijke interface te vereisen.

"Veel van deze toepassingen zullen profiteeren van 3D sensing om een nieuwe dimensie van data-invoer toe te voegen voor verbeterde besluitvorming. Als voorbeeld: het gebruik van hogere resolutie VCSEL-gebaseerde spotverlichting maakt langere sensing ranges en hogere nauwkeurigheid gezichtsherkenning mogelijk.

"Lumentum's toonaangevende en hoogpresterende VCSEL-arrays met nul veldfouten, gebruikt in deze gezamenlijke oplossen, drijven nieuwe toepassingen en helpen de droom van AIoT-apparaten met 3D sensing capaciteiten te realiseren."

Gianluca Colli, vicepresident en general manager, industrial and consumer sensor division (ICSD) groep bij ON Semiconductor, zegt: "Image sensors zijn de ogen voor intelligente sensing apparaten. Hun vermogen om verder te zien met meer detail biedt significant meer informatie voor de AI-processor's besluitvorming in AIoT-apparaten.

"Onze toonaangevende RGB-IR sensortechnologie, gecombineerd met de geavanceerde ISP-mogelijkheden van Ambarella's AI vision SoCs, kan zowel zichtbare als IR-afbeeldingen simultaan in apparaten brengen. Voor deze tweede generatie van onze gezamenlijke oplossingen hebben we klantfeedback benut om de resolutie van onze RGB-IR image sensors te verviervoudigen tot 4K (8MP)."

De drie bedrijven nieuwe gezamenlijke AIoT-oplossingen bestaan uit twee referentieontwerpen en additionele 3D sensing development kits, elk uniek geconfigureerd om toepassingsspecifieke eisen te adresseren voor de combinatie van AI-verwerking, 3D dieptesensing en vision sensing:

Vision+ referentieontwerp

Gericht op next-generation biometrische toegangscontrole readers, is het Vision+ referentieontwerp de AIoT-industrie's eerste 4K-oplossing om single-camera, 940nm gestructureerde-licht sensing uit te voeren gebaseerd op RGB-IR-technologie.

Het is ook de eerste die een single-chip oplossing voor diepteverwerking, AI-verwerking en videoverwerking benut. Gebaseerd op de Ambarella CV22 CVflow AI vision processor, omvat het single-camera gestructureerde-licht sensing aangedreven door Lumentum's VCSEL-technologie, met een bereik van 2 meter, en een 4K (8MP) RGB-IR CMOS image sensor van ON Semiconductor.

Saturn referentieontwerp

Gericht op next-generation slimme elektronische deur sloten, of eLocks, voor zowel commerciële als residentiële toepassingen, is het Saturn referentieontwerp de AIoT-industrie's eerste om AI-verwerking te integreren voor zowel single-camera gestructureerde-licht sensing als fast-boot videoverwerking.

Het is gebaseerd op de Ambarella CV25 CVflow AI vision processor en omvat een gestructureerde-licht camera aangedreven door Lumentum's VCSEL-technologie en de AR0237CS 2MP RGB-IR image sensor van ON Semiconductor.

Development kits

Gericht op intelligente sensing toepassingen en met kansen over verticales, kunnen Ambarella's CV2 series CVflow AI vision processor-gebaseerde development kits nu uitgerust worden met ToF sensor adapters die aangedreven worden door Lumentum's toonaangevende VCSEL-arrays. Een optionele 4K RGB-IR image sensor adapter is ook beschikbaar voor deze kits.

De open software development kit (SDK) voor Ambarella's CVflow AI vision processors maakt eenvoudige integratie van third-party applicaties mogelijk terwijl OEMs in staat zijn om verschillende regionale vereisten met een enkel platform aan te pakken (bijvoorbeeld door verschillende AI-algoritmen in verschillende regio's te gebruiken).

Daarnaast breidt deze robuuste, Linux-gebaseerde SDK de capaciteiten van edge sensing apparaten uit, vereenvoudigt productontwikkeling en versnelt time-to-market door:

• Custom applicatieontwikkelingsmogelijkheden
• Ondersteuning voor verschillende 3D modaliteiten, inclusief gestructureerd licht en ToF. Uniek: een enkele Ambarella SoC biedt 3D sensing verwerking zonder de noodzaak voor een toegewezen diepteprocessor of afzonderlijke host processor
• Hoge AI inferentie capaciteiten op het camera-apparaat om meerdere neurale netwerken simultaan te draaien
• Robuuste AI tools om deep neural network ontwikkeling en migratie te ondersteunen
• Geïntegreerde ISP om uitdagende scènes aan te pakken, inclusief hoge dynamische bereik en laag licht scenario's
• Ingebouwde Arm processors om klantapplicaties te draaien
• Geïntegreerde beveiligingshardware, inclusief secure boot, OTP voor encryptiesleutelopslag en Arm TrustZone technologie voor beveiligde encryptiesleutelvergelijkingen
• Rijke periferie interface ondersteuning om systeemontwerpen te vereenvoudigen

Beschikbaarheid

Deze gezamenlijke referentieontwerpen en development kits worden verwacht beschikbaar te zijn in juni. Meer informatie is beschikbaar via Ambarella.