Grazie a dei sensori di flessione che abbiamo sulle dita, quelli che sto muovendo adesso, riusciamo a rilevare la posizione di queste.
In più grazie a due unità di misurazione inerziale, dette IMU, posizionate una sul dorso mano e una sull'avambraccio, riusciamo a capire l'orientamento della nostra mano e del nostro avambraccio nello spazio.
Prendiamo tutti questi bellissimi dati e li diamo in pasto al nostro algoritmo di riconoscimento gestuale.
Questo algoritmo è in grado di capire quale parola voglia effettivamente dire la persona sorda, la apprende, la rileva e la manda via bluetooth allo smartphone e lo smartphone avvierà un processo di sintesi vocale che quindi parlerà per la persona sorda.