Cercetătorii au folosit inteligența artificială pentru a transforma ceasurile inteligente obișnuite într-un dispozitiv de măsurare precisă a mișcărilor mâinii

Noul ceas- asistent de la Universitatea Cornell și KAIST

Cercetătorii din cadrul Universității Cornell (SUA) și al Institutului Coreean pentru Tehnologii Avansate (KAIST) au creat sistemul WatchHand, care transformă un simplu ceas inteligent într-un tracker complet al mișcărilor mâinii. Sistemul utilizează doar difuzorul și microfonul integrat în ceas, fără a necesita senzori externi.

Cum funcționează WatchHand
1. Semnal acustic – ceasul emite unde sonore invizibile.
2. Captare de ecou – microfonul înregistrează semnalele reflectate și formează un profil de ecou.
3. Procesare locală – un algoritm de învățare automată, care rulează pe dispozitiv, convertește profilul în coordonate ale mâinii pe cele trei axe.

Astfel, sistemul procesează datele direct pe ceas, asigurând confidențialitatea și o latență minimă.

Avantaje
| Indicator WatchHand | Soluții tradiționale |
|---------------------|----------------------|
| Nu necesită senzori externi (camere, senzori IMU) | ✔ ❌ |
| Potrivit pentru uz zilnic | ✔ ❌ |
| Scalabilitate la milioane de dispozitive | ✔ ❌ |
| Procesare locală a datelor | ✔ ❌ |

Testare
- Participanți – 40 persoane.
- Date – aproximativ 36 de ore de gesturi, colectate în patru experimente independente.
- Platforme – mai multe modele de ceasuri inteligente.
- Scenarii – diverse poziții ale mâinii și condiții zgomotoase.

Rezultatele au arătat urmărirea fiabilă a mișcărilor degete și a rotației încheieturii chiar și în condiții dificile.

Perspective de aplicare
* Controlul computerului și al aplicațiilor prin gesturi.
* Interacțiune cu sistemele AR/VR.
* Asistență persoanelor cu mobilitate sau vorbire limitată.

Studentul doctorand KAIST, Ji‑van Kim, subliniază: „Dacă dispozitivul are difuzor și microfon, abordarea noastră este aplicabilă.”

Limitări și viitor
* În prezent funcționează doar pe dispozitive Android.
* Precizia scade în timpul mișcării utilizatorului (de exemplu, în mers).

Echipa dezvoltă activ îmbunătățiri pentru scenarii mobile.

Rezultatele studiului vor fi prezentate la conferința ACM CHI 2026 privind factorul uman în sistemele computaționale.

Ideea cheie

Profesorul adjunct al Universității Cornell, Cheng Zhang, a concluzionat: „WatchHand demonstrează cum o simplă actualizare de software poate transforma milioane de ceasuri existente într-o platformă inteligentă pentru monitorizarea comportamentului. Aceasta deschide drumul către noi moduri de interacțiune cu dispozitivele digitale fără tastatură și mouse.”