INFORMAȚII PROIECT

Titlu Proiect:

TRAVEE – Terapeut Virtual prin Feedback Augmentat pentru Recuperarea Neuromotorie (Contract UEFISCDI numarul 83PTE din 30/06/2022)

Coordonator project:

SC INFO WORLD SRL

Manager proiect:

Victor Asavei (Iunie 2022 – Iunie 2023)

Cristian Lambru (Iulie 2023 – Iunie 2024)

Buget Total Proiect:

1.773.239,00 RON/
Buget Public : 1.190.763,00 RON

Durata implementare proiect:

24 luni

Finanțat de

logo-uefiscdiUEFISCDI – Transfer la operatorul economic (PTE) – Cod depunere: PN-III-P2-2.1-PTE-2021-0634 http://uefiscdi.gov.ro/

image-01

PROIECTUL TRAVEE


Proiectul național de cercetare TRAVEE a creat o soluție modernă, eficientă, de cost redus, cu rezultate medicale deja dovedite prin pilotare și studiu clinic pentru recuperarea neuromotorie post-AVC sau alte traume cerebrale.

TRAVEE se bazează în primul rând pe exerciții de tip joc realizate de pacienți în RV (realitate virtuală), sub îndrumarea doctorului și adaptate necesităților fiecărui pacient, completate în funcție de caz cu echipamente avansate de tip EEG, FES și haptic.

TRAVEE adresează în mod distinct, cu funcții specializate, cele 3 faze tipice în recuperarea fiecarui pacient: recuperarea incipientă, recuperarea avansată în mediu clinic și în cele din urmă recuperarea avansată la domiciliu.

TRAVEE a fost dezvoltat de către universitățile POLITEHNICA București, “Gheorghe Asachi” din Iași și compania Info World, și a fost pilotat și utilizat deja într-un studiu clinic amplu în cadrul Institutului Naţional de Recuperare, Medicină Fizică, Balneoclimatologie şi Recuperare Medicală. TRAVEE a produs și produce, deja, pacienților implicați, un avans semnificativ în recuperare, fiind în același timp, pentru cei mai mulți dintre pacienți, o experiență plăcută, atractivă și motivantă !

TRAVEE poate revoluționa recuperarea neuromotorie, fiind prima soluție flexibilă de recuperare, cu capabilități unice, cu efect real, motivantă pentru pacienți și accesibilă ca preț.

În 2024 și 2025 se continuă avansul TRAVEE către stadiul de produs finit și introducerea în cât mai multe centre de recuperare, precum și crearea posibilităților de utilizare la domiciliu pentru un număr cât mai mare de pacienți.

REZUMATUL PROIECTULUI


Proiectul TRAVEE va dezvolta o soluție informatică accesibilă pentru recuperarea post-AVC a membrelor superioare şi inferioare, în toate stadiile recuperării.

În primul stadiu al recuperării, accentul se pune pe redobândirea controlului muscular, recuperarea constând în exerciții simple adecvate stadiului și evoluției pacientului. Deoarece în acest stadiu neuroplasticitatea are potențial maxim, feedback-ul puternic și susținut este esențial. Astfel, sistemul va include o idee originală,  implementată și testată cu succes (pentru membrele superioare), în cadrul proiectului TRAVEE-PNII 1/2014 printr-un studiu clinic, recuperarea prin feedback augmentat vizual, idee care permite depășirea situațiilor de blocaj specifice acestui stadiu al recuperării.

În acest stadiu, sistemul va utiliza tehnologii RV (Realitate Virtuală), mănuși de recuperare de cost redus, BCI (brain computer interface) de cost redus, FES (Functional Electrical Stimulation) de cost redus, brățară cu senzor IMU (Inerțial Measurement Unit). Avatarul pacientului (model virtual 3D din mediul virtual) va fi actualizat pe baza informațiilor recepționate de la senzorul IMU (pentru mișcări efective) sau BCI (pt. imagerie motorie timpurie, până pacientul reușește mișcare efectivă).

Feedback-ul augmentat constă în reproducerea pe avatar a unei mişcări îmbunătăṭite a membrului pacientului, faṭă de cea reală executată de pacient, mişcare care ar corespunde intenției pacientului și nu realității. Mișcările de amplitudine foarte mică sunt reprezentate cu un factor de amplificare gradual, astfel încât pacientul le va percepe, iar cortexul lui le poate procesa ca un rezultat constant și semnificativ. Astfel este închisă bucla cauzală de învățare, evitând blocarea recuperării, iar în plus percepția rezultatelor este de mare însemnătate psihologică, încurajându-l pe pacient, dovedindu-i că are rezultate și merită sa continue antrenamentul intens.

Al doilea stadiu al recuperării urmărește îmbunătățirea mobilității și a controlului muscular fin, prin exerciții motivante de interacțiune/manipulare a elementelor din mediul virtual. Vor fi implementate jocuri care solicită atât deplasarea amplă a membrelor cât și mișcări și acțiuni fine de manipulare a unor obiecte din realitatea virtuală/augmentată. Pentru urmărirea membrelor și a degetelor, va fi suficient fluxul RGB din perspectiva utilizatorului, aplicând tehnici de urmărire bazate pe tehnici de inteligență artificială precum urmărire în timp real în spațiul tridimensional a mâinii folosind o camera RGB monoculară.  Evoluția pacientului va putea fi urmărită de către terapeut de la distanță cu posibilitatea de ajustare a gradului de dificultate sau indicarea unui alt exercițiu, printr-o soluție minimalistă de telemedicină.

În Etapa 3 din 2024 au fost realizate următoarele activități:

  • Studiu clinic calitativ realizat la INRMFB, atât pentru faza timpurie cât și pentru faza avansată
  • Colectarea de nou feedback de la următoarele tipuri de utilizatori:
    • pacienți
    • terapeuți
  • Îmbunătățirea sistemului TRAVEE:
    • adăugare de noi funcții
    • perfecționarea funcțiilor existente
    • corecție erori
    • creșterea ușurinței de utilizare și a atractivității
  • Manualul de utilizare a sistemului
  • Planul tehnic de continuare
  • Diseminare științifică (ajungând la un total de 12 articole)

În Etapa 2 din 2023 au fost realizate următoarele activități:

  • stabilirea/crearea/adaptarea algoritmului de procesare a semnalelor EEG pentru determinarea activității de imaginare motorie funcție de dispozitivul/dispozitivele EEG selectate
  • crearea algoritmului de urmărire a membrelor bazat pe senzori
  • crearea algoritmului pentru stimularea electrică funcțională
  • testarea algoritmilor pentru noul hardware
  • dezvoltarea interfeței pacient
  • dezvoltarea interfeței terapeut
  • dezvoltarea sistemului de telemedicina
  • rafinarea bazată pe testare
  • crearea/implementarea exercițiilor de recuperare
  • evaluarea exercițiilor bazată pe testare
  • testare și evaluare continuă, de către terapeuti și pacienții selectați: interfața pacient, terapeut, exerciții
  • implementarea fluxului de bază al sistemului
  • implementarea algoritmilor de augmentare a mișcării
  • implementarea, optimizarea și integrarea algoritmilor de BCI
  • optimizarea și integrarea algoritmilor de urmărire a mișcării bazați pe senzori IMU
  • implementarea algoritmului de stimulare electrică funcțională
  • crearea bazei de date cu exercițiile de recuperare definite
  • testarea prototipului de laborator
  • implementarea sistemului de telemedicină
  • integrarea componentelor in sistemul de telemedicina
  • integrarea de funcții avansate în prototip și rafinarea sistemului
  • pregătirea procedurilor de testare pe pacienți
  • diseminarea rezultatelor în jurnale și conferințe

În Etapa 1 din 2022 au fost realizate următoarele activități:

  • studiu detaliat al soluțiilor de realitate virtuala și realitate augmentată pentru recuperare neuromotorie ținând cont de constrângerile de cost redus impuse
  • studiu detaliat al echipamentelor hardware pentru BCI
  • studiu detaliat al soluțiilor de urmărire video monoculară
  • studiu detaliat al soluțiilor de telemedicină
  • studiu detaliat de definire a exercițiilor de recuperare și gamificarea acestora
  • studiu detaliat al echipamentelor de tip mănușă robotică
  • studiu detaliat al echipamentelor bazate pe senzori IMU necesare în urmărirea membrelor
  • studiu detaliat referitor la interacțiunea bazată pe emoții dintre terapeutul virtual și pacient
  • stabilirea cerințelor funcționale și nefuncționale pentru sistemul TRAVEE, ținând cont de noile caracteristici hardware și capabilități ale algoritmilor
  • stabilirea arhitecturii de nivel înalt
  • definirea exercițiilor de recuperare
  • diseminarea rezultatelor în jurnale și conferințe