Mână protetică inteligentă cu control al forței bazat pe vedere artificială: integrarea vederii computerizate și a electromiografiei pentru prindere adaptivă

Mână protetică inteligentă cu control al forței bazat pe vedere artificială: integrarea vederii computerizate și a electromiografiei pentru prindere adaptivă

©

Autor:

Mână protetică inteligentă cu control al forței bazat pe vedere artificială: integrarea vederii computerizate și a electromiografiei pentru prindere adaptivă

Un studiu realizat la Tianjin University È™i publicat în Nanotechnology and Precision Engineering la data de 20 ianuarie 2026 a analizat dezvoltarea unui sistem inteligent de control al forÈ›ei de prindere pentru mâinile protetice, bazat pe integrarea vederii artificiale cu semnalele electromiografice. Cercetarea arată că această abordare permite o prindere mai naturală È™i mai sigură a obiectelor, adaptată automat la materialul È™i dimensiunea acestora.

Rezumat

  • Integrarea vederii computerizate cu electromiografia (EMG – electromiografie) permite control adaptiv al forÈ›ei de prindere.

  • Algoritmul YOLOv2 este utilizat pentru recunoaÈ™terea obiectelor È™i estimarea forÈ›ei necesare.

  • Sistemul este implementat pe o platformă embedded K210, optimizată pentru recunoaÈ™tere offline È™i timp real.

  • AcurateÈ›ea recunoaÈ™terii obiectelor este de aproximativ 90%, iar rata de recunoaÈ™tere pe sistemul real depășeÈ™te 85%.

  • Prinderea adaptivă a fost demonstrată cu succes pentru obiecte fragile (ouă) È™i rigide (sticle).

Context

Pierderea unui membru superior afectează profund autonomia funcÈ›ională È™i calitatea vieÈ›ii. DeÈ™i tehnologia protetică a evoluat semnificativ, una dintre cele mai mari provocări rămâne controlul natural al forÈ›ei de prindere. O forță excesivă poate deteriora obiectele fragile, în timp ce o forță insuficientă duce la alunecare È™i eÈ™ec funcÈ›ional.

Majoritatea sistemelor mioelectrice clasice se bazează exclusiv pe semnale EMG, utilizatorul fiind nevoit să ajusteze voluntar forÈ›a, uneori cu ajutorul feedbackului tactil artificial (presiune, alunecare, temperatură). Aceste soluÈ›ii cresc complexitatea cognitivă È™i solicitarea utilizatorului. Integrarea vederii artificiale oferă posibilitatea anticipării caracteristicilor obiectului, reducând necesitatea intervenÈ›iei conÈ™tiente continue.

Despre studiul actual

Scopul cercetării

Obiectivul studiului a fost dezvoltarea unui sistem de control al forÈ›ei de prindere pentru mâini protetice mioelectrice, care să combine:

  • recunoaÈ™terea vizuală a obiectelor (tip, dimensiune, textură),

  • identificarea intenÈ›iei utilizatorului prin electromiografie,

  • reglarea automată a pragului de presiune necesar prinderii.

Arhitectura sistemului

Sistemul este compus din următoarele elemente:

  • Senzor vizual OV2640, utilizat pentru captarea imaginilor obiectelor;

  • Placă de control K210, dotată cu accelerator neuronal hardware (KPU);

  • Algoritm YOLOv2 pentru detecÈ›ia È™i clasificarea obiectelor;

  • Senzori de presiune montaÈ›i la nivelul articulaÈ›iilor degetelor protetice;

  • Sistem EMG pentru recunoaÈ™terea gesturilor utilizatorului;

  • Modul de acÈ›ionare cu motor electric È™i transmisie subacÈ›ionată.

Colectarea și procesarea datelor

Au fost selectate cinci tipuri de obiecte frecvent utilizate în viaÈ›a zilnică, care reprezintă peste 90% dintre obiectele manipulate uzual:

  • ou,

  • minge,

  • pix,

  • sticlă,

  • cheie.

Setul de date a inclus 1500 de imagini, câte 300 pentru fiecare categorie, captate de la o distanță standard de 20 cm.

  • 1200 de imagini au fost utilizate pentru antrenarea modelului,

  • 300 de imagini pentru testare,
    cu o împărÈ›ire de tip 8:2.

Imaginile au fost etichetate manual, iar modelul YOLOv2 a fost antrenat utilizând cadrul TensorFlow. ConvergenÈ›a a fost atinsă după 30 de iteraÈ›ii, cu o rată de pierdere de 0,0123%.

Determinarea forței de prindere

Forța de prindere a fost estimată indirect prin presiunea pozitivă măsurată la nivelul contactului dintre degete și obiect.

  • Senzorii au fost amplasaÈ›i pe police, index È™i degetul mijlociu.

  • Pragul final de control a fost definit ca media valorilor celor trei senzori, pentru a reduce variabilitatea determinată de poziÈ›ionarea incompletă pe obiecte mici sau fragile.

  • Valorile au fost obÈ›inute iniÈ›ial de la voluntari sănătoÈ™i È™i ulterior implementate în sistemul protetic.

Rezultate

Performanța recunoașterii vizuale

  • AcurateÈ›ea recunoaÈ™terii obiectelor pe calculator: peste 93%.

  • AcurateÈ›ea recunoaÈ™terii pe placa K210: aproximativ 90%.

  • Modelul implementat are o dimensiune sub 5 MB È™i un consum energetic sub 1 W.

Integrarea EMG și vedere artificială

  • Rata de recunoaÈ™tere a gesturilor EMG în testele offline: 96%.

  • Rata de recunoaÈ™tere în condiÈ›ii reale: peste 85%.

  • Timpul mediu de răspuns al sistemului: sub 200 milisecunde.

Teste funcționale

Sistemul a demonstrat:

  • prindere sigură a ouălor fără deteriorare (obiecte fragile),

  • prindere fermă a sticlelor È™i a obiectelor rigide,

  • adaptarea automată a modului de prindere (strângere, ciupire), în funcÈ›ie de recunoaÈ™terea vizuală È™i de intenÈ›ia EMG.

Rezultatele confirmă funcÈ›ionarea unui sistem în buclă închisă, în care vederea artificială anticipează cerinÈ›ele mecanice, iar electromiografia controlează gestul.

Concluzii

Integrarea vederii artificiale cu electromiografia permite un salt calitativ în controlul mâinilor protetice. Prin automatizarea estimării forÈ›ei de prindere în funcÈ›ie de obiect, sistemul reduce sarcina cognitivă a utilizatorului È™i oferă o experiență mai naturală È™i mai sigură. Datele experimentale susÈ›in fezabilitatea È™i aplicabilitatea clinică a acestei abordări, în special pentru dispozitive protetice portabile cu consum redus de energie.


Data actualizare: 21-01-2026 | creare: 21-01-2026 | Vizite: 119
Bibliografie
Li, Y., et al. (2026). An intelligent artificial hand with force control based on machine vision. Nanotechnology and Precision Engineering. DOI: 10.1063/5.0253551. https://pubs.aip.org/tu/npe/article/9/1/013009/3377418/An-intelligent-artificial-hand-with-force-control

Imaginea aparține autorilor studiului
©

Copyright ROmedic: Articolul se află sub protecția drepturilor de autor. Reproducerea, chiar și parțială, este interzisă!

Alte articole din aceeași secțiune:

Din Ghidul de sănătate v-ar putea interesa și:
  • Controlul neuronal continuu al unui membru bionic restabileÈ™te mersul biomimetic după amputare
  • Forumul ROmedic - întrebări È™i răspunsuri medicale:
    Pe forum găsiți peste 500.000 de întrebări și răspunsuri despre boli sau alte subiecte medicale. Aveți o întrebare? Primiți răspunsuri gratuite de la medici.
      intră pe forum