Die United States Defense Advanced Research Projects Agency (DARPA) wählte drei Forscherteams unter der Leitung von Raytheon, BAE Systems und Northrop Grumman aus, um eine Infrarot-(IR-)Kameratechnologie zu entwickeln, die auf die Umgebung reagiert. Es handelt sich um ein Projekt im Rahmen des FENCE-Programms, das auf eine „neuromorphe“ elektronische Kamera mit einem künstlichen Sehvermögen abzielt, das es ahmt die Art und Weise nach, wie das Gehirn Informationen verarbeitet.
Die modernen Kameras von heute funktionieren gut mit Szenen, die nur wenig bearbeitet werden müssen, und mit Bildern, die relativ einfach sind. Ihre Fähigkeiten versagen jedoch in sehr unordentlichen und dynamischen Szenen, was ihren Einsatz in vielen Fällen einschränkt militärische Anwendungen.
So funktioniert die "Gehirn"-Kamera
Das FENCE-Programm von DARPA zielt darauf ab, eine neue Klasse von ereignisbasierten Infrarot-Focal-Plane-Focal-Arrays (FPA) zu entwickeln, die eine digitale Signalverarbeitung mit geringer Latenz und geringem Stromverbrauch sowie Algorithmen für maschinelles Lernen umfassen. Mit anderen Worten? Die Entwicklung einer neuromorphen Kamera wird es intelligenten Sensoren ermöglichen, dynamischere Szenen für zukünftige militärische Anwendungen zu verarbeiten.
Ereignisbasierte Bildsensoren arbeiten asynchron und übertragen nur Informationen über Pixel in einem Bild, die sich geändert haben. Das bedeutet, dass sie bei sehr komplexen Bildern mit halsbrecherischer Geschwindigkeit arbeiten, aber viel weniger Daten produzieren und dabei weniger Strom verbrauchen. Ein hyperbolischer Sprung nach vorn.
Die neuromorphe Kamera verfügt über Siliziumschaltkreise, die die Funktionsweise des Gehirns nachahmen; sie bieten geringe Leistung, geringe Latenz und hohe Energieeffizienz. Eine ereignisbasierte Kamera arbeitet nach diesen Prinzipien, aber heute fehlt es ihr an fortschrittlicher Intelligenz, um komplexe Aufgaben auszuführen.
Doktor Whitney Mason, Programmmanager, der das FENCE-Programm leitet
Die nächsten Schritte
Forscher von Raytheon, BAE und Northrop sie werden daran arbeiten, sich zu entwickeln eine integrierte asynchrone Ausleseschaltung (ROIC), die es einem integrierten FENCE-Sensor ermöglicht, mit weniger als 1,5 W Leistung zu arbeiten.
Unter diesen Bedingungen, glauben Sie mir, gibt es nichts, was eine Kamera dieser Art ignorieren kann.
