Die Verarbeitung, Erzeugung und Visualisierung von multimodalen Netzwerken, in denen etwa symbolische und ikonographische Inhalte miteinander vernetzt werden, um sie multimodal rezipierbar zu machen, bilden neuartige Herausforderungen für die digitalen Geisteswissenschaften, da sie weit über textbasierte Medien hinausreichen. Digitalisate von Schrifttexten, Bildern und Illustrationen können in diesem Zusammenhang als Beispiele für knotenbildende Informationsobjekte ebenso genannt werden wie dreidimensionale Objektrepräsentationen. Die Anordnung dieser Objekte zu <hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">semiotischen Netzwerken</hi> hat den Zweck, deren Zusammenhangsstruktur zu visualisieren und rezipierbar zu machen. Der Begriff des Netzwerks erlaubt es dabei, Mikrostrukturen auf der Ebene von Knotenpaaren oder -triaden ebenso zu unterscheiden, wie Mesostrukturen von so genannten Netzwerkmotiven oder gar Makrostrukturen, welche die Gesamtorganisation des jeweiligen Informationsraums thematisieren (etwa im Sinne einer Zentrums-Peripherie-Struktur). Multimodale Netzwerke waren bereits Gegenstand einer Reihe von Projekten (siehe z.B. Li et al. 2007; Kane, Alavi 2008; Nasser, Gleich 2017). Allerdings befindet sich darunter kein Projekt, das eine generische Plattform zur Visualisierung und Annotation solcher Netzwerke im Rahmen virtueller Umgebungen zur Verfügung stellt. Um diese Lücke zu schließen, haben wir <hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold">VAnnotatoR</hi> (Spiekermann, Abrami, Mehler 2018) <hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold"> </hi>entwickelt. <hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold">VAnnotatoR</hi> ist ein Framework zur Erstellung und Visualisierung multimodaler Netzwerke in virtuellen Umgebungen. Das System erlaubt die Bearbeitung und Visualisierung dieser Netzwerke als <hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">multimodale Hypertexte</hi> (Mehler et al. 2018) in der <hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">virtuellen Realität</hi> (VR) und der <hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">augmentierten Realität</hi> (AR). <hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold">VAnnotatoR</hi> wurde mithilfe von Unity3D<hi xmlns="http://www.tei-c.org/ns/1.0" rend="superscript">1</hi> für VR implementiert und unterstützt gängige Desktop-VR-Brillen<hi xmlns="http://www.tei-c.org/ns/1.0" rend="superscript">2</hi> (HTC Vive und Oculus Rift). Die AR-Implementierung von <hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold">VAnnotatoR</hi> für Smartphones basiert wiederum auf AR-Core<hi xmlns="http://www.tei-c.org/ns/1.0" rend="superscript">3</hi>. Mittels <hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold">VAnnotatoR</hi> sind Inhalte visualisierbar, suchbar, relationierbar, attribuierbar und weit darüber hinaus annotierbar. Die derzeitige Implementierung dieses Systems erlaubt die Modellierung von Netzwerken auf der Ebene so genannter Hypergraphen (Berge 1989) und hierarchischer Graphen, in denen Knoten vollständige Graphen enthalten können. Abbildung 1 illustriert ein solches Netzwerk unter anderem durch Rekurs auf Texte, Bilder, Photographien, dreidimenionale Modelle und ein begehbares Haus. Um eine natürliche Interaktion mit den Komponenten solcher Graphen zu ermöglichen, beinhaltet <hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold">VAnnotatoR</hi> eine Gesten- und Bewegungssteuerung mit dazugehörigen VR-Controllern. Da klassische VR-Eingabegeräte die Gestaltungsfreiheit der Gestensteuerung limitieren, beinhaltet <hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold">VAnnotatoR </hi>darüber hinaus eine Gestenerkennung unter Verwendung von Leap-Motion<hi xmlns="http://www.tei-c.org/ns/1.0" rend="superscript">4</hi>. Gleichzeitig wurde eine Gestenerkennung basierend auf Datenhandschuhen<hi xmlns="http://www.tei-c.org/ns/1.0" rend="superscript">5</hi> für den <hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold">VAnnotatoR</hi> entwickelt (Kühn 2018). Da komplexe Annotationsprozesse i.d.R. von mehreren Annotatoren durchgeführt werden müssen, ermöglicht <hi xmlns="http://www.tei-c.org/ns/1.0" rend="bold">VAnnotatoR</hi> zudem die simultane und kollaborative Bearbeitung von multimodalen Netzwerken. Die Annotationen werden in UIMA-Strukturen, unter Verwendung des <hi xmlns="http://www.tei-c.org/ns/1.0" rend="italic">UIMA-Database Inferface</hi> (Abrami, Mehler 2018), abgespeichert und nutzbar gemacht.