Lernen in Mixed Realities

HoloLens im Einsatz
Foto: afca.ch; Ein Blick durch die HoloLens: ein Molek¨¹l der App "Molegram" im Einsatz. Entwickelt von ETH CADD, ETH LET und afca ag.

In Mixed Realities bewegen sich Nutzer in Systemen und Umgebungen, in denen sich die nat¨¹rliche Wahrnehmung des Lerners mit einer k¨¹nstlichen vermischen. F¨¹r den Benutzer werden die virtuellen Elemente in der realen Welt verankert und daher als ?reale? Objekte wahrgenommen. Diese M?glichkeit d¨¹rfte auch die Lehre massgeblich beeinflussen (bspw. bei Objekten die in der Realit?t zu klein oder verborgen sind). Ende 2016 machte Microsoft mit der HoloLens das erste all-in-one-Ger?t f¨¹r holografische 3D-Darstellungen einem breiteren Publikum zug?nglich. Damit wurde Mixed Realities im Lernkontext m?glich. Das LET hat f¨¹r die ETH evaluiert, in welchem didaktischen Umfeld diese Technologie einen Mehrwert bietet und damit das Lernen und Verst?ndnis der Studierenden f?rdern k?nnte.

Zu diesem Zweck war das Projekt ?Lernen in Mixed Realities? ins Leben gerufen worden. In diesem Projekt unterst¨¹tzte das LET Dozierende und vernetze die Aktivit?ten an der ETH. 12 HoloLenses standen zur Verf¨¹gung und Zugang zu Entwicklungsressourcen und -partnern sowie Spezialisten von Microsoft wurden vermittelt.

Das Projekt ?Lernen in Mixed Realities? wurde unterst¨¹tzt von der Adrian Weiss Stiftung.

An der ETH Z¨¹rich realisierte HoloLens-Projekte:

Vergr?sserte Ansicht: hololens_afca
Foto: afca.ch

Im Rahmen dieses Projekts erh?lt der Teilnehmer die Gelegenheit wortw?rtlich in die Welt der Molek¨¹le einzutauchen. Molegram bietet eine Mixed Reality, die das Verst?ndnis von molekularen Strukturen vertieft und erweitert. Als Erstes gibt die App die M?glichkeit, die Oberfl?che eines holographischen Molek¨¹ls zu erzeugen. Zu verstehen, wo ein Molek¨¹l aufh?rt und sein Umfeld beginnt, ist in der Biologie von ebenso fundamentaler Bedeutung wie die Unterscheidung zwischen Fremd und Selbst. Molegram erlaubt es dem Nutzer verschiedene pharmazeutisch relevante Proteinstrukturen unterschiedlicher Gr?sse darzustellen und zu untersuchen. Die App bietet aber nicht nur die M?glichkeit ein Molek¨¹l als dreidimensionale Struktur darzustellen und es als Hologramm in den Raum zu projizieren, sondern erm?glicht zus?tzlich, aktiv mit diesem holographischen Molek¨¹l zu interagieren. Wichtiger noch, die App berechnet nicht nur automatisch die molekulare Oberfl?che mittels eines Clicks, sondern erlaubt es dem Nutzer die sogenannte ?solvent- accessible? Oberfl?che herzustellen, indem der Nutzer virtuell selbst zu einem Wassermolek¨¹l wird und sich als dieses ¨¹ber die molekulare Struktur hinwegbewegt.

Vergr?sserte Ansicht: molegram_explorer
Bild: afca.ch

Dadurch wird es m?glich die ?ups und downs? der Oberfl?che im wahrsten Sinne des Wortes zu erfahren. Der Nutzer kann mittels Molegram das molekulare Hologramm von innen und aussen aus allen Blickwinkeln betrachten und untersuchen. Es ist nicht mehr n?tig, das Molek¨¹l am Computerbildschirm mit der Maus hin und her zu drehen, sondern durch Molegram betritt der Nutzer die virtuelle Welt des Molek¨¹ls und l?sst es zu einem holographischen Objekt unserer realen Welt werden.

Dieses neuartige, innovative Konzept bietet ¨¹ber die Mensch-Maschine Interaktion neue Wege in der Wahrnehmung von Molek¨¹len und in der chemischen Strukturanalyse.

Das Projekt wurde in enger Zusammenarbeit mit der Firma afca [externe Seitewww.afca.ch] realisiert. Die Molegram App ist zu Lehrzwecken kostenlos verf¨¹gbar bei der ETH Z¨¹rich.

ETH News Artikel: https://www.ethz.ch/de/news-und-veranstaltungen/eth-news/news/2018/02/hololens.html

Projektwebseite: http://www.cadd.ethz.ch/education/hololense.html

Kurs: 535-0023-00L  Computer-Assisted Drug Design (Practical Course), Herbstsemester 2017

Lehrstuhl: Computer-Assisted Drug Design (cadd.ethz.ch), Institute of Pharmaceutical Sciences

Kontakt: Dr. Jan Hiss, , Prof. Dr. Gisbert Schneider

Vergr?sserte Ansicht: geoinfk_2

Studierende des GIS und Geoinformatik-Labs entdecken die M?glichkeiten der Microsoft HoloLens, eines der fortschrittlichsten Mixed-Reality-Produkte.

Die Grundkenntnisse in Softwareentwicklung halfen ihnen dabei innerhalb eines Semesterkurses eine HoloLens-App f¨¹r ortsbezogene Aufgaben aus der realen Welt zu entwerfen und entwickeln, welche ?Gamification? - ?berlegungen ber¨¹cksichtigt. Lagebezogene und in Beziehung stehende physische Objekte werden dabei in interaktive und holographische Systeme umgewandelt. Folgende drei Projekte wurden von den Studierenden implementiert:

  • Ein vernetztes r?umliches System wie Versorgungsleitungen im Anlagenmanagement
  • Eine geographische Anwendung wie die Modellierung in der Landschaftsplanung
  • Eine raumkognitive Unterhaltungsanwendung wie das Brettspiel ?Das verr¨¹ckte Labyrinth?
Vergr?sserte Ansicht: geoinfk_3

Die Studierenden wurden in ihrem Projekt durch Tutoren und Zugang zu entsprechender Fachliteratur und Technologie unterst¨¹tzt und kritisch begleitet. Die Ergebnisse dieser Projekte k?nnen als ?immersive? Anwendungen erlebt werden, bei denen virtuelle geographische Objekte auf und um Objekte der realen Welt platziert und mit ihnen interagiert werden.

Vergr?sserte Ansicht: geoinfk_1

Die Ergebnisse zeigen auch Erkenntnis, inwieweit Studierende ohne grosses Vorwissen, solche Apps bauen k?nnen. Basierend auf diesen Resultaten k?nnen die Unterrichtsans?tze transferiert werden auf andere Fakult?ten wie Biologie, Chemie oder Architektur.

externe SeiteVideo zum Projekt

Kurs: GIS and Geoinformatics Lab (103-0778-00L), Herbstsemester 2017

Lehrstuhl: Chair of Geoinformation Engineering

Betreuung: David Rudi, Fabian G?bel, Christian Sailer, Dominik Bucher

Kontakt: Christian Sailer, 

Vergr?sserte Ansicht: AR_Refresh_Teaching
Foto: Urs Br?ndle, D-USYS, ETH Z¨¹rich

Auf den Biodiversit?tsexkursionen kartieren Studierende der Umweltwissenschaften die Verteilung einer Reihe von Arten, die zu einer Organismengruppe geh?ren. Sie bereiten sich mit einem Online-Tutorial vor, das aus einem Identifikationsschl¨¹ssel, Videomaterial und einem Abschlusstest besteht. Im Feld ist die Erstklassifizierung bestimmter Organismengruppen jedoch immer noch schwierig, da Gr??e, Aussehen und detaillierte Merkmale vom Bildmaterial in den Tutorials abweichen k?nnen. So m¨¹ssen in der Regel Experten erste Hilfe leisten.

Bei Flechten mit ihrer sehr stabilen Lage an B?umen kann die Hololens diese Funktion jedoch ¨¹bernehmen. Unsere Holucator-App erkennt einzelne B?ume an ihrer Rindenstruktur und hebt Flechtenkolonien hervor, deren Position zuvor im Lehrmodus eingegeben wurde. Die Studierenden k?nnen dann interaktiv Artennamen in einer Multiple-Choice-Frage ausw?hlen, Kolonien derselben Art markieren oder detaillierte Informationen ¨¹ber die fokussierten Flechtenarten abrufen, wie z.B. Skizzen von charakteristischen Strukturen. Die Hololens-Architektur erlaubt es sogar, gleichzeitig konventionelle Linsen zu verwenden. Auf dem Gel?nde des B¨¹rkliplatzes stehen insgesamt 12 B?ume mit 8 verschiedenen Flechtenarten zur Verf¨¹gung, so dass mehrere Studierende gleichzeitig ¨¹ben und dann mit der eigentlichen Artenkartierung beginnen k?nnen.

Die Holucator App wurde erstmals im M?rz 2018 von insgesamt etwa 30 Studierenden genutzt. Die Faszination f¨¹r das neue Medium stand eindeutig im Vordergrund des Feedbacks der Studenten, die tats?chlich gewonnenen Erkenntnisse haben wir demgegen¨¹ber nicht evaluiert. Dennoch konnten wir feststellen, dass die Zeit, welche f¨¹r die individuelle Beobachtung der Flechten zur Verf¨¹gung stand im Vergleich zum Szenario mit Experteninstruktion deutlich l?nger war.

Die Holucator (Lichen-Edition) App, entwickelt in Zusammenarbeit mit der Firma afca, ist die erste Outdoor-Anwendung der HoloLens an der ETH. Sie kann f¨¹r andere ?hnliche Anwendungen angepasst werden. Die zu untersuchenden Objekte m¨¹ssen dazu allerdings eine fixe Position haben und von einer ausreichende Anzahl von festen Objekten umgeben sein, so dass sich die Holo-Lens im Raum orientieren kann.

Vergr?sserte Ansicht: SplashScreen
Bild: afca.ch

Die App im Einsatz (ungeschnitten):
externe Seitehttps://www.youtube.com/watch?v=CfzMUuzAxko

Projektverantwortlicher:
Dr. Urs Br?ndle,

  

Kontakt

Thomas Korner
Dozent am Departement Maschinenbau und Verfahrenstechnik

Abt. f¨¹r Lehre und Lernen
Haldenbachstr. 44
8092 Z¨¹rich
Schweiz

JavaScript wurde auf Ihrem Browser deaktiviert