Multimodalna komunikacja z systemem
Marek Goliasz, 24.10.2009W badaniu zespołu Antonelli De Angeli z The University of Manchester sprawdzano, w jaki sposób ludzie podczas wykonywania zadań z systemem komputerowym jednocześnie wydają polecenia za pomocą mowy oraz pisma.
Przy pomocy specjalnego systemu udostępniającego plan miasta, badani mieli znaleźć dom spełniający wymagania klientów oraz w drugim zadaniu, aktualizować mapę poprzez dodawanie, przemieszczanie usuwanie budynków, dróg itp. Mogli wprowadzać zapytania poprzez mikrofon oraz zaznaczać na mapie etykiety, odległości itp. System odpowiadał przedstawieniem odpowiedniej informacji na mapie.
95% biorÄ…cych udziaÅ‚ w badaniu najczęściej wykorzystywaÅ‚o obie możliwoÅ›ci wydawania poleceÅ„ dotyczÄ…cych poÅ‚ożenia przestrzennego w zadaniu aktualizacji mapy – dodawania obiektów, przenoszenia ich, modyfikowania czy zaznaczanie dwóch punktów, pomiÄ™dzy którymi odlegÅ‚ość miaÅ‚a być wypisywana przez system. 20% elementów tego zadania rozwiÄ…zanych w ten sposób byÅ‚o kombinacjÄ… wprowadzania danych przez mikrofon i tablet LCD.
DrugÄ… grupÄ™ poleceÅ„, wydawanych jednoczeÅ›nie poprzez mowÄ™ i zapis stanowiÅ‚y: wysyÅ‚anie zapytaÅ„ (np.”Czy ten dom [tu nastepowaÅ‚o zakreÅ›lenie obiektu] znajduje siÄ™ w obszarze zagrozonym powodziami”), usuwanie obiektów, dodawanie etykiet czy przybliżanie obrazu.
W ogólnych elementach zadania (np. przewijanie wyświetlanego obrazu) które nie wymagały lokalizacji przestrzennej lub identyfikacji obiektów, badani korzystali z tylko jednej metody komunikacji np. tylko z tabletu.
Warto zaznaczyć, że komunikacja badanych z systemem zarówno za pomocą mowy, jaki i grafiki (wpisywania, zaznaczania itp.) była bardzo skuteczna, gdyż wprowadzane informacje nie powtarzały się, ani nie zakłócały lecz były komplementarne.