Sony IMX500 und IMX501: Bildsensoren mit integrierten KI-Funktionen

Sony IMX500 und IMX501: Bildsensoren mit integrierten KI-Funktionen

Sony hat zwei neue Bildsensoren vorgetellt, die IMX 500 und IMX 501. Laut den Japanern handele es sich bei diesen "Intelligent Vision Sensors", wie das Unternehmen selbst sie nennt, um die weltweit ersten Bildsensoren, die direkt KI-Features integrieren. Dadurch sollen sich Daten über Edge-AI besonders schnell verarbeiten lassen.Zählpixel

Jenes ermögliche es, bei der Nutzung von Cloud-Diensten die Latenzen bei der Datenübertragung zu verkürzen, Datenschutzvorgaben Rechnung zu tragen und den Energieverbrauch sowie die Kommunikationskosten zu senken. Die Sensoren sind nicht etwa für mobile Endgeräte gedacht, sondern für spezielle Kameras mit KI-Features, die etwa im Einzelhandel und Industrieausrüstungssektor Verwendung finden könnten.

Sony IMX500 und IMX501: Bildsensoren mit integrierten KI-Funktionen

Der Unterschied zwischen dem Sony IMX 500 und dem IMX 501 findet sich nur darin, dass es sich beim IMX 500 um den reinen Chip handelt. Die neuen Sensoren sind gestapelt („stacked“) aufgebaut und bestehen aus einem Pixelchip und einem Logikchip. Es seien eben laut Sony die weltweit ersten Bildsensoren, bei denen die künstliche Intelligenz zur Bildanalyse und Bildverarbeitung in den Logikchip bereits direkt integriert ist.

Das Signal, das der Pixelchip erfasst, wird durch die KI auf dem Sensor verarbeitet, sodass keine Hochleistungsprozessoren oder externen Speicher benötigt werden. Der Sensor gibt anstelle von Bildinformationen Metadaten aus (d.h. semantische Informationen zu den Bilddaten), was die Datenmengen reduziert und Datenschutzbedenken Rechnung trägt. Darüber hinaus ermöglicht die KI-Fähigkeit, Funktionen für ein breites Spektrum von Anwendungen bereitzustellen - etwa Echtzeit-Objektverfolgung mit KI-Verarbeitung.

Der Pixelchip ist laut Sony hintergrundbeleuchtet und verfügt über ca. 12,3 effektive Megapixel zur Erfassung von Informationen über einen weiten Betrachtungswinkel. Neben der herkömmlichen Bildsensor-Betriebsschaltung ist der Logikchip mit dem DSP (Digitaler Signalprozessor) von Sony ausgestattet, welcher die KI-Signale verbreitet, sowie einem Speicher für das KI-Modell. Diese Bauweise macht den Einsatz von weiteren Hochleistungsprozessoren oder externen Speichern überflüssig und eignet sich für Edge-AI-Systeme.

Da eben keine Bildinformationen ausgegeben werden, werden die Sicherheitsrisiken verringert, und der Datenschutz sei laut Hersteller gewährleistet. Zusätzlich zu dem Bild, das der konventionelle Bildsensor aufzeichnet, können die Benutzer je nach den Anforderungen und Einsatzzwecken auch andere Datenausgabeformate wählen. Dazu zählen die Ausgabe von Bildern im ISP-Format (YUV/RGB) und die Ausgabe bestimmter ROI (Region of Interest)-Bildbereiche.

Weiterhin erklärt Sony, dass die Benutzer die KI-Modelle ihrer Wahl in den eingebetteten Speicher schreiben und sie je nach ihren Anforderungen oder den Bedingungen am Einsatzort des Systems auch neu schreiben und aktualisieren können. Wenn beispielsweise mehrere Kameras, die diesen Sensor nutzen, in einem Ladengeschäft installiert seien, ließen sich mit einem einzigen Kameratyp verschiedene Standorte, Bedingungen, Zeiten oder Zwecke abdecken.

Wird die Kamera im Eingangsbereich installiert, können damit z. B. die Kunden gezählt werden, die das Geschäft betreten. Wird sie wiederum an einem Regal angebracht, kann damit erkannt werden, wo Waren fehlen. Ihr seht: Ist alles aber nicht so sehr für private Nutzer interessant, sondern für Geschäftskunden.

AngebotBestseller Nr. 1
CHERRY KC 200 MX, Mechanische Tastatur, DE QWERTZ, MX2A Silent RED, Schwarz | Deutsches Layout (QWERTZ...
  • Kabelgebundenes, mechanisches Office-Keyboard mit eloxierter Metallplatte: Ausgestattet mit unseren...
  • Hochwertige mechanische CHERRY MX2A SILENT RED Schalter: Leichtgängiges und leises Tippgefühl mit...
  • Praktisch: Geschmackvolle weiße Status LEDs in den CAPS LOCK-, SCROLL LOCK- und NUM LOCK-Tasten sowie...
AngebotBestseller Nr. 2
Turtle Beach Vulcan II Tactile mechanische RGB-Gaming-Tastatur DE layout | Schwarz, TITAN-Mechanikschalter...
  • Lineare mechanische TITAN II-ROT-Schalter mit einer Lebensdauer von 150 Millionen Anschlägen
  • Taktische mechanische TITAN II-BRAUN-Schalter mit einer Lebensdauer von 150 Millionen Anschlägen
  • Vorgeölte Tastenstabilisatoren für sanfte und stabile Tastenanschläge
AngebotBestseller Nr. 3
SteelSeries Apex 3 Gaming Tastatur - 10-Zonen RGB-Beleuchtung - Flüsterleise Gaming-Switches - Premium magnetische...
  • IP32 wassergeschützt - Verhindert Schäden durch verschüttete Flüssigkeiten
  • 10-Zonen RGB-Beleuchtung - Großartige Farbschemen und reaktive Effekte
  • Flüsterleise Gaming-Switches - Nahezu geräuschlos für 20 Millionen reibungsarme Tastendrücke
Fehler im Artikel entdeckt? Hier melden.
Avatar-Foto

Hauptberuflich hilfsbereiter Technik-, Games- und Serien-Geek. Nebenbei Doc in Medienpädagogik und Möchtegern-Schriftsteller. Hofft heimlich eines Tages als Ghostbuster sein Geld zu verdienen oder zumindest das erste Proton Pack der Welt zu testen. Mit geheimniskrämerischem Konto auch bei Facebook zu finden.
Moin! Lass uns respektvoll diskutieren.

Wir freuen uns auf sachliche, konstruktive und gerne humorvolle Beiträge. Da wir hier wie mit real anwesenden Personen umgehen möchten, löschen wir Kommentare, die nur herabwürdigen oder völlig am Thema vorbeigehen. Ein Recht auf Veröffentlichung besteht nicht. Mit dem Absenden stimmst du unserer Datenschutzerklärung und der Speicherung deiner Daten zu.