NUI = Natural User Interface GUI = Graphical User Interface
Mithilfe des NUI/GUI-Konzepts soll die Interaktion der Nutzer:innen mit dem System geplant werden. Hierbei wird besonders der Wechsel der Kodalitäten (visuell, haptisch und auditiv) betrachtet.
Nachfolgend ist das Grundkonzept abgebildet. Die drei Spalten stellen die drei Kodalitäten auditiv, visuell und haptisch dar. Das System kann per visuellem oder auditiven Input und Output genutzt werden. Für die visuelle Nutzung wird ein Display mit Touch-Gesten verwendet. Für die auditive Nutzung wird ein Lautsprecher und ein Mikrofon für eine Sprachsteuerung benötigt. Zusätzlich kann das System haptische Signale als Unterstützung geben.