WO2023178984 - METHODS AND SYSTEMS FOR MULTIMODAL HAND STATE PREDICTION
National phase entry is expected:
Publication Number
WO/2023/178984
Publication Date
28.09.2023
International Application No.
PCT/CN2022/123548
International Filing Date
30.09.2022
Title **
[English]
METHODS AND SYSTEMS FOR MULTIMODAL HAND STATE PREDICTION
[French]
PROCÉDÉS ET SYSTÈMES DE PRÉDICTION D'ÉTAT DE MAIN MULTIMODALE
Applicants **
HUAWEI TECHNOLOGIES CO., LTD.
Inventors
CODY, Roya
HUANG, Da-Yuan
CAO, Xiang
LI, Wei
Priority Data
17/704,970
25.03.2022
US
Application details
| Total Number of Claims/PCT | * |
| Number of Independent Claims | * |
| Number of Priorities | * |
| Number of Multi-Dependent Claims | * |
| Number of Drawings | * |
| Pages for Publication | * |
| Number of Pages with Drawings | * |
| Pages of Specification | * |
| * | |
| Number of Office Actions | * |
| * | |
International Searching Authority |
CNIPA
* |
| Recordal of a Change of the Applicant's Name/Address |
Change of Applicant's Name and Address
* |
| Type of Assignment |
The Standard Agent's Assignment
* |
| Applicant's Legal Status |
Legal Entity
* |
| * | |
| * | |
| * | |
| * | |
| * | |
| Entry into National Phase under |
Chapter I
* |
| Patent Delivery |
Send the Letters Patent by Courier
* |
| Translation |
|
* The data is based on automatic recognition. Please verify and amend if necessary.
** IP-Coster compiles data from publicly available sources. If this data includes your personal information, you can contact us to request its removal.
Quotation for National Phase entry
| Country | Stages | Total | |
|---|---|---|---|
| China | Filing, Examination, Granting | 1902 | |
| EPO | Filing, Examination, Granting | 14339 | |
| Japan | Filing, Examination, Granting | 2327 | |
| South Korea | Filing, Examination, Granting | 2442 | |
| USA | Filing, Examination, Granting | 5340 |
Total:
26,350
The term for entry into the National Phase has expired. This quotation is for informational purposes only
Contact Us
Abstract[English]
Methods and systems are described for generating hand state predictions. A hand state prediction system (200) includes a machine learning-based model, such as a neural network model, that is trained to convert inertial motion measurements and surface contact data into predictions of a corresponding hand gesture or gripping posture. For each window of data sampled, motion data (230) and contact data (250) are obtained, processed and fused to generate a fused prediction. The hand state prediction system (200) can operate in continuous mode to automatically detect a start and an end of a hand action, or a user can designate a start and an end of a hand action. The hand state predictions are generated by a multimodal classifier (360) by processing the fused prediction. Instructions represented by a hand action can be acted upon through a command action performed by a computing device or a computer application.[French]
L'invention concerne des procédés et des systèmes pour générer des prédictions d'état de main. Un système de prédiction d'état de main (200) comprend un modèle basé sur l'apprentissage automatique, tel qu'un modèle de réseau de neurones artificiels, qui est entraîné à convertir des mesures de mouvement inertiel et des données de contact de surface en prédictions d'un geste de main ou d'une posture de préhension correspondants. Pour chaque fenêtre de données échantillonnées, des données de mouvement (230) et des données de contact (250) sont obtenues, traitées et fusionnées pour générer une prédiction fusionnée. Le système de prédiction d'état de main (200) peut fonctionner en mode continu pour détecter automatiquement un début et une fin d'une action de main, ou un utilisateur peut désigner un début et une fin d'une action de main. Les prédictions d'état de main sont générées par un classificateur multimodal (360) par traitement de la prédiction fusionnée. Des instructions représentées par une action manuelle peuvent être appliquées par l'intermédiaire d'une action de commande effectuée par un dispositif informatique ou une application informatique.