A nőkét könnyebb olvasni
Nem kis feladat, de vannak néhányan, akik tudnak szájról olvasni. Tudásuk szerzett képesség; a 16. században egy spanyol szerzetes, Benedictine fejlesztette tökélyre az addig is létező tudományt, és tanított elsősorban romlott hallásúakat. Ma is sokan használják módszerét, ám egy diák, Ahmad Hassanat a Mu’tah-i Egyetemről azzal foglalkozik, hogy a számítógépek is megtanulhassák ezt.
Beszéd közben, az artikuláció során a száj különféle állapotokat vesz fel, nagyjából 10-14 ilyen állapot, vizéma (viseme), míg hangokból ennél is többet, nagyjából 50-et is képezhetünk különféle nyelveken. Az első probléma, hogy szájról olvasáskor egy vizéma több fonémát is jelenthet. De még a tapasztalt szájról olvasóknak sem könnyű, ők ugyanis a vizémát is csak az esetek felében látják jól. Számok (1-9) szájról olvasásakor például még ők is csak az esetek felében sikeresek. Nem csoda, hogy a gépi szájról olvasás komoly kihívásokkal küzd. Egy erre alkalmas rendszernek először az arcot, majd a szájat, illetve annak kulcspontjait kell felismernie, és elemezni azok változását. Nem mindegy, hogy a beszélő mennyire görbíti például a felső ajkát beszéd közben, ráadásul ez alanyról alanyra változó. Vannak emberek, akik vizuálisan „csöndesek”, a szájuk, ha mozog is beszéd közben, annak apró változásaiból senki nem mondja meg, milyen hangot adtak. Tovább nehezíti a számítógép dolgát, ha a beszélő bajuszos vagy szakállas – a nők szájáról ezért is könnyebb olvasni. Hassanat rendszere a nehézségek ellenére kontrollált környezetben 76 százalékos pontosságot produkált, ami első körben nem is tűnik rossznak.
A következő lépés természetesen a szótárral, később pedig akár a hangérzékelő rendszerrel való összekapcsolás lehet, amivel a gépi beszédérzékelés a korábbiaknál sokkal pontosabb lehet. De hang felvétele nélkül sincs okunk aggódni, már nincs sok hátra, hogy a nagy felbontású térfigyelő kamerák felvételein is alkalmazhassanak hasonló módszereket. Akit bővebben érdekel a téma, annak többek között Czap László doktori disszertációját is ajánljuk figyelmébe!
