Die Entwicklung und Fertigung des TDONN-Chips haben das Ziel, komplexe physikalische Modelle in abstrakte Modelle neuronaler Netzwerke abzubilden. Das optische neuronale Netzwerkmodell für die multimodale Klassifizierungsaufgabe besteht aus drei Teilen: einer Eingabeschicht, fünf versteckten Schichten und einer Ausgabeschicht. Nach der ...

Das differentiable Strahlenverfolgungsframework simuliert Bilder, die von Kameras aufgenommen wurden, mithilfe von Strahlenverfolgungsbasiertem Rendering. Während der Vorwärts-Bildsimulation wird der Gradient jedes optischen Parameters θ (Oberflächenkrümmung, Position, Kegel, und polynomiale Koeffizienten) verfolgt. Anschließend kann die Sensor-Simulation in ein nachgeschaltetes tiefes Netzwerk ...