Was ist Augmented-Reality-Optik?

Definition der Augmented-Reality-Optik

Augmented Reality (AR) kombiniert mithilfe von Technologie eine simulierte Umgebung mit der realen. AR nutzt optische Verfahren, um eine simulierte Umgebung zu erzeugen, die die reale Umgebung ergänzt oder erweitert, sodass der Nutzer beides als eine einzige Umgebung wahrnimmt. Die Hardware für Augmented Reality umfasst typischerweise einen Computer, der Echtzeitsimulationen ermöglicht und die simulierte Umgebung mithilfe eines Bildschirms mit der realen Umgebung synchronisiert und abbildet.

Durchsichtige Head-Mounted-Displays (HMDs), auch bekannt als durchsichtige Nahfeld-Displays oder Head-Up-Displays (HUDs), sind derzeit die beliebteste Art von AR-Optiken. In der virtuellen Realität (VR) können tragbare Geräte (z. B. Haptic-Handschuhe) verwendet werden, die die Bewegungen des Nutzers erfassen und darauf reagieren; Geräte für akustisches Feedback; und Tracker für Körper, Kopf und Augen, um mit der Simulation zu interagieren. In der erweiterten Realität (AR) interagiert der Nutzer jedoch auch mit Objekten in der realen Welt.

Augmented-Reality-Optik

Wie Augmented-Reality-Optik funktioniert

Um Augmented Reality (AR) zu ermöglichen, projiziert ein optisches System digitale Bilder auf ein transparentes Display vor den Augen des Nutzers und blendet so virtuelle Informationen in die reale Umgebung ein. Dies lässt sich mit verschiedenen Displaytypen realisieren, beispielsweise mit Head-Mounted Displays (HMDs), mobilen Geräten wie Tablets oder fest installierten Displays wie Windschutzscheiben.

AR-Headsets und fest installierte Displays

Ein typisches AR-Optiksystem besteht aus drei Hauptkomponenten:

  • Lichtquellen: Mikrodisplays wie organische Leuchtdioden (OLEDs) oder Flüssigkristallanzeigen (LCDs) erzeugen die erweiterten Bilder. Binokulare Head-Mounted Displays (HMDs) nutzen zwei Displays, eines für jedes Auge, um durch Stereoskopie einen 3D-Effekt zu erzeugen. Holografische HMDs verwenden räumliche Lichtmodulatoren (SLMs), um moduliertes, kohärentes Licht für eine fortschrittliche Bildprojektion zu erzeugen.
  • Empfänger: Die Augen des Benutzers empfangen sowohl die Bilder der realen Welt als auch die erweiterten Bilder.
  • Optische Elemente: Linsen und Kombinatoren mischen das Licht der Mikrodisplays mit dem Licht der realen Umgebung und projizieren das resultierende Bild an die Augen des Nutzers. Bei AR-Brillen beispielsweise durchläuft ein Mikrodisplaybild eine Reihe optischer Komponenten, darunter Strahlformungslinsen, Prismen und Korrektionsgläser, bevor es für den Betrachter mit der realen Szene verschmolzen wird.
Schematische Darstellung der Augmented Reality für Rezeptanwendungen (c) The Optical Society

Abbildung 1. Schematische Darstellung der AR-Verschreibung:

(a) Seitenansicht Angezeigt Der AR-Strahlengang. Die Korrektionslinse dient der Sehkorrektur und Wellenleitung des AR-Bildes. Eine Strahlformungslinse bricht die Lichtstrahlen eines Mikrodisplays, die durch ein Einkopplungsprisma in die Korrektionslinse eintreten und in einem festgelegten Abstand von der Linse ein vergrößertes virtuelles Bild erzeugen.

b) Geometrische Parameter im Prescription AR-System.

(c) Das 3D-Diagramm der optischen Komponenten.

Nachdruck mit freundlicher Genehmigung. © The Optical Society.

Gestaltungsüberlegungen

Optische Aberrationen können, ähnlich wie in anderen optischen Systemen, die Bildqualität von AR-Headsets beeinträchtigen. Aberrationen wie chromatische Aberration, sphärische Aberration, Koma, Astigmatismus, Bildfeldwölbung und Verzeichnung können zu Unschärfe oder Verzerrungen der projizierten Bilder führen. Sorgfältige Konstruktion und Optimierung sind daher unerlässlich, um diese Aberrationen zu minimieren und die Bildschärfe zu verbessern.

Die gleichzeitige Anpassung des Sichtfelds (FOV) und der Auflösung des menschlichen Auges ist eine Herausforderung, weshalb je nach Anwendungszweck Kompromisse erforderlich sein können. Designentscheidungen umfassen die Abwägung von Sichtfeld, Gerätegewicht und -größe, Auflösung, Pupillengröße (Augenbox), Augenabstand und Mikrodisplay-Abmessungen. Technologische Lösungen für diese Kompromisse beinhalten die Verwendung hochauflösender Insets und räumlicher oder zeitlicher Kachelung zur Optimierung von Sichtfeld und Auflösung, die Nutzung partieller binokularer Überlappung und Kachelung nach Beugungsordnung sowie die Nachbildung der Austrittspupille mithilfe von Arrays. Zusätzlich können Eye-Tracking-Systeme integriert werden, um Sichtfeld und Pupillengröße zu optimieren.

Diese kontinuierlichen Innovationen tragen dazu bei, dass AR-Optiken in verschiedenen Anwendungsbereichen immersivere und praktischere Erlebnisse bieten.

Simulation eines vollständig reflektierenden Freiformdesigns in CODE V

Abbildung 2. CODE V-Simulation eines vollständig reflektierenden Freiformdesigns unter Verwendung eines Testbildes, Bildsimulation (IMS) des Ausgangssystems und Bildsimulation nach der Optimierung.

Wie man Optiken für erweiterte Realität entwirft

Die Entwicklung von AR-Optiken erfordert eine Kombination aus spezialisierten Softwaretools und Expertise aus verschiedenen Ingenieursdisziplinen. Optikingenieure nutzen Software, um Bildgebungssysteme zu erstellen und zu optimieren, Streulicht zu analysieren und diffraktive optische Elemente zu entwerfen. Maschinenbauingenieure benötigen CAD-Tools, um das System zu planen und thermische sowie strukturelle Analysen durchzuführen. Elektrotechnikingenieure können ebenfalls einbezogen werden, um die Blickverfolgung zu implementieren und die an das optische System gesendeten Signale zu steuern.

Entwicklung von Augmented-Reality-Optiken mit der optischen Designsoftware Keysight

Der Arbeitsablauf

Optische Systeme:

  • Mit der Optikdesign-Software CODE V können Sie Lichtstrahlen durch das optische System verfolgen, das System optimieren, um Aberrationen zu reduzieren, Verzerrungen zu minimieren und die Auflösung zu erhöhen, wie sie beispielsweise in einem Head-Mounted-Display dargestellt wird. Sie können außerdem Augmented-Reality-Optiken für Head-up-Displays (HUDs) in Fahrzeugen verwenden, die in CODE V modelliert wurden (siehe nächster Abschnitt). Anschließend exportieren Sie die Geometrie nach LightTools.
  • Die Beleuchtungsplanungssoftware LightTools kann Beleuchtung, Streulicht und Geisterbilder modellieren. Mit LightTools lässt sich außerdem die Beleuchtungsgleichmäßigkeit optimieren.
Verwendung von CODE V und LightTools zur Modellierung der optischen Systeme für Augmented-Reality-Optiken

Abbildung 3. Exportieren Sie die CODE V-Linse als LightTools-Datei.

Gitter mithilfe von photonischer Designsoftware entwerfen:

Diffraktive Gitter koppeln Licht in die Wellenleiterplatte ein und leiten es von dort ins Auge. Für eine optimale Bildqualität müssen die Gitter präzise konstruiert sein. Bei der Auslegung und Optimierung von Gittern können Parameter wie der Beugungswinkel und die Effizienz einzelner oder mehrerer Beugungsordnungen berücksichtigt werden.

  • RSoft DiffractMOD RCWA ist ein sehr effizientes Werkzeug zur genauen Berechnung der Beugungseigenschaften von transversal periodischen Bauelementen.
  • RSoft FullWAVE FDTD ist ein weiteres leistungsstarkes Werkzeug, um bei Bedarf die Beugungseigenschaften von transversal periodischen Bauelementen genau zu berechnen.
  • Die RSoft MOST- Optimierung in der RSoft CAD-Umgebung bietet eine komfortable Methode zur Optimierung von Gittern mit RSoft FullWAVE oder RSoft DiffractMOD.

Nachdem Sie die Gitter erstellt haben, können Sie die Informationen zur bidirektionalen Streuverteilungsfunktion (BSDF) und die Layoutdateien direkt in LightTools exportieren, um eine Oberflächeneigenschaft zu definieren. Alle diffraktiven Eigenschaften sind in den RSoft-BSDF-Dateien enthalten, die Informationen darüber liefern, wie eine Oberfläche, beispielsweise eine dünne Schicht oder ein Muster, Licht streut.

Entwerfen Sie Gitter mithilfe von Photonik-Designsoftware.

Entwicklung von Augmented-Reality-Optiken für Automobilanwendungen

Ein Head-up-Display (HUD) erweitert das Sichtfeld des Fahrers um ein Bild auf einem Bildschirm. Dafür wird Software benötigt, die die durch die Windschutzscheibe verlaufenden Lichtstrahlen modelliert und die Qualität des projizierten Bildes bewertet.

CODE V bietet leistungsstarke Anwendungsfunktionen im Bereich HUD-Design und eignet sich für vielfältige Herausforderungen bei der Entwicklung optomechanischer Systeme. Ingenieure können diese optische Designsoftware für CAD-Visualisierung und Raytracing nutzen. CODE V unterstützt neue Freiformflächen und ermöglicht so mehr Gestaltungsfreiheit für kompakte Windschutzscheiben-Kombinationssysteme. Diese Flächen verbessern die Aberrationskontrolle, da mit steigender Displayauflösung (höhere Pixeldichte) die Baugröße kleiner wird.

Beispiel für ein Head-up-Display

Nach Abschluss des Designs ist es wichtig, die endgültige Systemleistung anhand der Nennkriterien und die tatsächliche Systemleistung im Ist-Zustand zu überprüfen. Hierfür ist LightTools der logische nächste Schritt für die Betrachtersimulation. Eine umgekehrte Strahlverfolgung von Spektralfarbenobjekten, die ein Anzeigebild in LightTools darstellen, zeigt das projizierte HUD-Bild für einen Betrachter (auf eine Modellszene). Eine LightTools-Simulation kann auch dazu beitragen, unvorhergesehene Probleme mit Streubildern oder Reflexionen im System aufzudecken. Ingenieure können auch die CAD-Import- und Messwerkzeuge von LightTools verwenden, um Folgendes zu bestimmen:

  • Abstand zwischen Augenbox und Windschutzscheibe
  • Ungefährer Einfallswinkel auf die Windschutzscheibe
  • Abstand zwischen Windschutzscheibe und Armaturenbrett

Die LightTools-Simulation der Leistungsfähigkeit optischer Systeme in der realen Welt ist für Anwender von Keysight-Konstruktionsprodukten ein hervorragendes Hilfsmittel bei ihrer Arbeit.

Worin besteht der Unterschied zwischen Augmented Reality und Virtual Reality Optik?

Der Hauptunterschied zwischen Augmented-Reality- (AR) und Virtual-Reality- (VR) Optiken liegt in ihrer Interaktion mit der realen Umgebung. VR-Optiken simulieren die gesamte visuelle Umgebung und lassen den Nutzer in eine vollständig virtuelle Welt eintauchen. AR-Optiken hingegen erfassen die reale Umgebung und überlagern sie mit digitalen Informationen, wodurch simulierte und reale Elemente visuell miteinander verschmelzen.

Bei AR ist das Display typischerweise transparent, sodass Nutzer sowohl die reale Welt als auch digitale Erweiterungen gleichzeitig sehen können. VR-Displays hingegen zeigen nur die simulierte Umgebung und blenden die reale Welt aus.

Zu den wichtigsten Unterschieden zwischen AR- und VR-Optiken gehören:

  • Anforderungen an das Display: AR benötigt Displays mit hoher Leuchtdichte, um die Sichtbarkeit in hellen Umgebungen wie im Freien oder in Operationssälen zu gewährleisten.
  • Optische Präzision: Bei durchsichtigen AR-Head-Mounted-Displays (HMDs) sollte der Winkelregistrierungsfehler – die Differenz des Winkels zwischen realem und virtuellem Bild – für eine optimale Bildschärfe unter 1 bis 3 Bogenminuten liegen.
  • Designüberlegungen: AR-Headsets nutzen häufig ein gefaltetes optisches Design, um ein weites Sichtfeld bei gleichzeitig kompakter Bauform zu erzielen. Diese Geräte müssen einen optischen Kombinator integrieren, der reflektiertes Licht aus virtuellen Szenen mit transmittiertem Licht aus der realen Welt kombiniert. Für Prototypen verwenden Entwickler üblicherweise Strahlteiler, während holografische optische Elemente (HOEs) eine dünnere und flachere Lösung für bestimmte Wellenlängen bieten.
Unterschiede zwischen Augmented-, Mixed- und Virtual-Reality-Anwendungen

Welche realen Anwendungsgebiete gibt es für Augmented-Reality-Optik?

Diese Beispiele veranschaulichen, wie Augmented-Reality-Optiken eine Vielzahl von Branchen verändern, indem sie das Situationsbewusstsein verbessern, die Entscheidungsfindung optimieren und interaktivere Erlebnisse schaffen.

  • Head-up-Displays (HUDs) für die Fahrt: Liefern Echtzeitinformationen auf der Windschutzscheibe, um den Fahrer zu unterstützen.
  • Chirurgische Unterstützung: Blendet während medizinischer Operationen Verfahrensanweisungen und hilfreiche Daten ein.
  • Kampfunterstützung: Bietet verbesserte Lageerkennung und Zielinformationen für das Militärpersonal.
  • Konstruktion und Design: Unterstützt bei der Visualisierung und Modifizierung von 3D-Modellen von Gebäuden und Produkten.
  • Soziale Interaktion: Ermöglicht die gleichzeitige Kommunikation mit realen und virtuellen Zielgruppen.
  • Unterhaltung und Tourismus: Verbessert das Spiel- und Tourismuserlebnis durch die Einblendung historischer Szenen oder dynamischer Informationen in die Umgebung.
  • Bildung: Ermöglicht es Lehrbüchern und Lernmaterialien, interaktive Erklärungen direkt zu realen Objekten und Umgebungen hinzuzufügen.
Beispiele für Augmented-Reality-Anwendungen

Sie brauchen Hilfe oder haben Fragen?