Glasovna interakcija mobilnih aplikacij

Vnašanje obsežnih izjav v mobilne naprave je lahko dolgočasno in dolgotrajno delo. Identificirali smo več primerov, ko imajo delavci na terenu težave pri izpolnjevanju obrazcev in bi jim koristilo uporabo prostoročnega vnašanja podatkov. V nekaterih primerih je lahko izpolnjevanje obrazcev z glasovnim vmesnikom celo varnejše od vpisovanja vseh informacij na mobilni napravi. Poleg tega lahko glasovni vmesnik podpira inkluzivnost (pogosto starejših) slabovidnih delavcev.

MightyFields Voice (MFVoice) poenostavi terensko delo in ga naredi kar se da učinkovito. MF Voice služi kot razširitev aplikacije MightyFields s podporo glasovnih interakcij v aplikaciji. Uporabniki lahko izdajo glasovne ukaze za prehod med zasloni aplikacij in izpolnjevanje obrazcev. 

Kje je možno uporabiti MFVoice?

Delo v nevarnih razmerah – pri delu z visokonapetostnimi stroji, na višini ali z nevarnimi materiali uporaba mobilne naprave ni vedno enostavna. MFVoice lahko delavcem na terenu pomaga pri učinkovitejšem zbiranju podatkov, obenem pa poveča varnost zaposlenih. 

Posamezniki s slabim vidom in/ali posebnimi potrebami imajo sedaj možnost preprostega zbiranja podatkov. Na primer, posameznik s slabim vidom ima lahko težave pri vnašanju podatkov v majhno mobilno napravo, veliko lažje pa bi jim bilo uporabljati glasovne ukaze. 

Tehnični pregled MFVoice

MFVoice je sestavljen iz treh komponent, ki jih lahko vidite na sliki na desni strani. Prva komponenta je razširitev mobilne aplikacije MigthyFields. Razširitev čaka na glasovni ukaz uporabnikov in ko so le-ti izdani, zbere kontekst zaslona aplikacije. Kontekst je zbirka gumbov, povezav, vnosnih polj in izbirnih elementov. Nato se zbrani podatki pošljejo Googlovi storitvi govora v besedilo, ki izključno pretvori zajete glasovne ukaze v besedilo. 

V drugem koraku se besedilo in kontekst pošlje naši storitvi za prepoznavanje glasovnih dejanj, kjer algoritem na podlagi besedila in konteksta predvidi dejanje, ki ga uporabnik želi izvesti. 

V zadnjem, tretjem koraku se predvideno dejanje pošlje nazaj razširitvi, ki izvrši ukaz. 

Bolj tehnični opis razširite MFVoice lahko najdete tukaj:

    

Naložbo sofinancirata Republika Slovenija in Evropska unija iz Evropskega sklada za regionalni razvoj.