CarDialer a JukeBox testování použitelnosti (za provozu)

CarDialer a JukeBox
testování použitelnosti
(za provozu)
(semestrální práce z 36SCP)
Jindřich Gottwald
([email protected])
Zadání:
V praxi ověřte použitelnost aplikací CarDialer a JukeBox. Jedná se o software
navržený k užívání za jízdy, praxe tedy znamená testování v reálném automobilu. Testy by
měly prozkoumat kognitivní zátěž řidiče, jeho schopnost věnovat se řízení a ovládání
aplikací zároveň. Jelikož se jedná o produkty ovládané hlasem, zjistěte jejich rozpoznávací
schopnosti při přirozeném hluku vozidla.
Popis testovaného produktu:
CarDialer je aplikace určená k ovládání mobilního telefonu hlasem. Telefon je
připojen k malému počítači přes bluetooth. JukeBox slouží k přehrávání mp3, samozřejmě
je opět ovládán hlasem.
CarDialer i JukeBox běží na odlehčené verzi Windows XP. Jako hardware slouží
x86 PC, speciálně upravené z hlediska velikosti a spotřeby. K tomuto počítači je připojen
mikrofon a 5ti tlačítková klávesnice určená k ovládání testovaných softwarů.
Ovládání aplikací:
Základ ovládání tkví v „push-to-talk“ tlačítku, tedy pokud chceme vyřknout nějaký
příkaz, musíme k tomu podržet speciální tlačítko. Toto tlačítko bude zřejmě ve finální verzi
součástí volantu. CarDialer je pak kromě hlasu možno ovládat čtyřmi směrovými
klávesami, kde nahoru/dolu listuje nabídkou, doprava znamená potvrzení volby a doleva
značí návrat zpět. Přesný význam tlačítek se mění podle stavu, ve kterém se aplikace
nachází. JukeBox bohužel klávesové ovládání neumožňuje, vše je zde tedy nutno obstarat
hlasem.
Zatímco CarDialer reaguje jen na několik přesně definovaných frází, JukeBox musí
umět rozeznat celý slovník. Oba programy pracují pouze s angličtinou.
Prostředí testu:
Test jsme prováděli v automobilu Opel Omega. Tento vůz má automatickou
převodovku, což participantovi trochu zlehčuje úlohu. Ovládací tlačítka jsme umístili na
ruční brzdu, mikrofon na střechu ke sluneční cloně. Projížděli jsme po periferii Prahy, na
Chodově. Naše okružní jízda je na přiložené mapě vyznačena červenou barvou. Tato
trasa obsahuje kruhové objezdy i světelné křižovatky. Maximální rychlost byla 90km/h.
Hardware jsme připojili do elektrického okruhu pomocí redukce do zapalovače.
Používali jsme telefon Sony Ericsson k700i.
mapa Chodov (převzato z www.mapy.cz)
Participant:
Z časových důvodů byl vybrán pouze jeden zkušenější participant. Test měl odhalit
nejzávažnější problémy, k čemuž byl test na jedné osobě zcela postačující.
věk: 29
úroveň angličtiny: velmi dobrá
praxe s programy ovládanými hlasem: ne
úroveň ovládání mobilního telefonu: výborná
úroveň ovládání mp3 přehrávače: výborná
praxe v řízení automobilu: pravidelně jezdí dva roky
úroveň řízení: velmi dobrá (téměř žádné problémy v centru velkého města)
telefonování s handsfree: bez problémů
Zadání testů:
●
před jízdou:
○
připojit hardware
○
připojit mobil
○
seznámit se s tutoriálem
○
zkalibrovat mikrofon
○
zavolat kontakt
(dial gs)
○
zavolat číslo
(dial number 728 401 268)
○
přidat kontakt
(add a new contact vosa 728 401 268)
○
přečíst zmeškané hovory
(what are my missed calls)
○
přečíst poslední sms
(what are my incoming messages)
○
přehrát libovolnou mp3
(play me some rock)
●
za jízdy (opakovaně):
○
přijmout hovor
(accept)
○
zavěsit hovor
○
vytočit kontakt a zrušit vytáčení
(dial vosa, cancel)
○
vytočit kontakt
(dial vosa)
○
přečíst nově došlou sms a pauznout čtení
(wait)
○
přečíst sms znovu
(what are my incoming messages)
○
smazat sms
(delete)
○
změnit hrající mp3ku
Nalezené problémy:
Po pauznutí tutoriálu CarDialeru příkazem „wait“, se již nepodařilo z tutoriálu
hlasem odejít, ovládání klávesnicí naštěstí zůstalo funkční.
Špatné rozpoznávací schopnosti, například:
●
„dial gs“ jako „dial 0“
●
„delete“ jako „28“
●
„add new contact“ jako „call contact“
●
„read“ jako „delete“
●
„what can i hear“ jako „mute“
Na „delete“ sms nebylo potřeba žádné potvrzení akce, což v kombinaci se špatným
rozpoznáváním dost zamrzí.
Vždy po přijmutí nebo odmítnutí příchozího hovoru aplikace zamrzla, pomohl jen její
restart.
CarDialer občas nedetekoval příchozí hovor: Zatímco mobil zvonil, CarDialer dělal
jako by nic.
Výsledné zhodnocení:
Během testování vyplynulo na povrch několik chyb. Většina z nich mohla být
nalezena předem, při testování mimo provoz.
Mačkání tlačítka pro mluvení nevypadalo jako problém, musíme ovšem přihlédnout
k faktu, že jsme používali automobil s automatickou převodovkou.
Největším problémem je bezpochyby rozpoznávání příkazů, to selhává již při nízké
úrovni hluku. Dalo by se říci, že uspokojivě nefunguje ani za úplného klidu. Některé
příkazy se nepodařilo zadat ani na několikátý pokus.
Po opravení majoritních chyb bude potřeba v testování za provozu pokračovat.
Zatím se aplikace nejeví příliš použitelně.
Návrhy na zlepšení:
Zrušit „push-to-talk“ tlačítko a nahradit ho klíčovým slovem. Případně zaměnit za
funkci „push-to-active“.
CarDialer a JukeBox by měly fungovat zároveň a měly by mít unifikované ovládání.
Propojení handsfree s aplikacemi – spojit mikrofon pro handsfree s mikrofonem pro
ovládání aplikací. Stejně tak tlačítko pro zavěšení namapovat na ovládací klávesy aplikací.
Schopnost aplikace učit se, přizpůsobit se určité osobě. Spelování by také jistě
ušetřilo spoustu nervů.
Možnost kategorizovat hudební soubory také dle adresářů, nejen pomocí ID3 tagů.