Motion Tracking in Diagnosis: Gait Disorders Classification with a Dual-Head Attentional Transformer-LSTM
ČlánekOmezený přístuppeer-reviewedpostprintdc.contributor.author | Shayestegan, Mohsen | cze |
dc.contributor.author | Kohout, Jan | cze |
dc.contributor.author | Trnkova, Katerina | cze |
dc.contributor.author | Chovanec, Martin | cze |
dc.contributor.author | Mareš, Jan | cze |
dc.date.accessioned | 2024-08-24T07:07:54Z | |
dc.date.available | 2024-08-24T07:07:54Z | |
dc.date.issued | 2023 | eng |
dc.description.abstract | Gait and motion stability analysis in gait dysfunction problems is a very interesting research area. Usually, patients who undergo vestibular deafferentation are affected by changes in their dynamic balance. Therefore, it is important both patients and physicians are able to monitor the progress of the so-called vestibular compensation to observe the rehabilitation process objectively. Currently, the quantification of their progress is highly dependent on the physician's opinion. In this article, we designed a novel methodology to classify the gait disorders associated with unilateral vestibular deafferentation in patients undergoing vestibular schwannoma surgery (model of complete vestibular loss associated with imbalance due to vestibular nerve section and eventual labyrinthectomy). We present a dual-head attentional transformer-LSTM (DHAT-LSTM) to evaluate the problem of rehabilitation from gait dysfunction, which is observed by a Kinect. A system consisting of a key-point-RCNN detector is used to compute body landmark measures and evaluate gait dysfunction based on a DHAT-LSTM network. This structure is used to quantitatively assess gait classification by tracking skeletal features based on the temporal variation of feature sequences. The proposed deep network analyses the features of the patient's movement. These extracted high-level representations are then fed to the final evaluation of gait dysfunction. The result analytically demonstrates its effectiveness in classification evaluation when used in conjunction with state-of-the-art pose estimation and feature extraction techniques. An accuracy greater than 81% was achieved for given sets of individuals using velocity-based, angle-based, and position features for both the whole body and the symmetric features of the body. | eng |
dc.description.abstract-translated | Analýza stability chůze a pohybu při problémech s dysfunkcí chůze je velmi zajímavou oblastí výzkumu. U pacientů, kteří podstoupí vestibulární deaferentaci, obvykle dochází ke změnám dynamické rovnováhy. Proto je důležité, aby pacienti i lékaři mohli sledovat průběh tzv. vestibulární kompenzace a objektivně tak pozorovat rehabilitační proces. V současné době je kvantifikace jejich pokroku velmi závislá na názoru lékaře. V tomto článku jsme navrhli novou metodiku klasifikace poruch chůze spojených s jednostrannou vestibulární deaferentací u pacientů, kteří podstoupili operaci vestibulárního schwannomu (model úplné ztráty vestibulárního nervu spojený s nerovnováhou v důsledku úseku vestibulárního nervu a případné labyrinthektomie). Představujeme dvouhlavý pozorný transformátor-LSTM (DHAT-LSTM) k vyhodnocení problému rehabilitace z dysfunkce chůze, která je pozorována pomocí Kinectu. Systém sestávající z detektoru klíčových bodů-RCNN se používá k výpočtu měr tělesných orientačních bodů a k vyhodnocení dysfunkce chůze na základě sítě DHAT-LSTM. Tato struktura se používá ke kvantitativnímu vyhodnocení klasifikace chůze sledováním kosterních prvků na základě časových změn sekvencí prvků. Navržená hluboká síť analyzuje rysy pohybu pacienta. Tyto extrahované reprezentace na vysoké úrovni jsou pak přivedeny ke konečnému vyhodnocení dysfunkce chůze. | cze |
dc.format | p. article number 98 | eng |
dc.identifier.doi | 10.1007/s44196-023-00280-z | eng |
dc.identifier.issn | 1875-6891 | eng |
dc.identifier.obd | 39888773 | eng |
dc.identifier.uri | https://hdl.handle.net/10195/83594 | |
dc.identifier.wos | 001002707500001 | eng |
dc.language.iso | eng | eng |
dc.peerreviewed | yes | eng |
dc.publicationstatus | postprint | eng |
dc.publisher | Atlantis Press | eng |
dc.relation.ispartof | International Journal of Computational Intelligence Systems, volume 16, issue: 1 | eng |
dc.relation.publisherversion | https://link.springer.com/article/10.1007/s44196-023-00280-z | eng |
dc.rights | Pouze v rámci univerzity | eng |
dc.subject | Deep learning | eng |
dc.subject | Classification | eng |
dc.subject | Gait disorders | eng |
dc.subject | Vision transformer | eng |
dc.subject | LSTM | eng |
dc.subject | TPCNN | eng |
dc.subject | hluboké učení | cze |
dc.subject | klasifikace | cze |
dc.subject | poruchy chůze | cze |
dc.subject | Vision transformer | cze |
dc.subject | LSTM | cze |
dc.subject | TPCNN | cze |
dc.title | Motion Tracking in Diagnosis: Gait Disorders Classification with a Dual-Head Attentional Transformer-LSTM | eng |
dc.title.alternative | Sledování pohybu v diagnostice: Klasifikace poruch chůze pomocí dual-head attention transformátoru-LSTM | cze |
dc.type | Article | eng |
Soubory
Původní svazek
1 - 1 z 1
Náhled není k dispozici
- Název:
- s44196-023-00280-z_(1).pdf
- Velikost:
- 1.88 MB
- Formát:
- Adobe Portable Document Format