WO2025181774 - EVENT-BASED MULTIMEDIA SEGMENT CLASSIFICATION FROM CROSS-MODAL FEATURES OF MULTIMEDIA CONTENT

National phase entry is expected:
Publication Number WO/2025/181774
Publication Date 04.09.2025
International Application No. PCT/IB2025/052231
International Filing Date 28.02.2025
Title **
[English] EVENT-BASED MULTIMEDIA SEGMENT CLASSIFICATION FROM CROSS-MODAL FEATURES OF MULTIMEDIA CONTENT
[French] CLASSIFICATION DE SEGMENTS MULTIMÉDIA BASÉE SUR UN ÉVÉNEMENT À PARTIR DE CARACTÉRISTIQUES INTERMODALES DE CONTENU MULTIMÉDIA
Applicants **
SONY GROUP CORPORATION
Inventors
WASNIK, Pankaj
KAR, Purbayan
CHUDASAMA, Vishal
GHADIYA, Ayush
Priority Data
202411015338   01.03.2024   IN
Application details
Total Number of Claims/PCT *
Number of Independent Claims *
Number of Priorities *
Number of Multi-Dependent Claims *
Number of Drawings *
Pages for Publication *
Number of Pages with Drawings *
Pages of Specification *
*
Number of Office Actions *
*
International Searching Authority
*
Recordal of a Change of the Applicant's Name/Address
*
Type of Assignment
*
Applicant's Legal Status
*
*
*
*
*
*
Entry into National Phase under
*
Patent Delivery
*
Translation

* The data is based on automatic recognition. Please verify and amend if necessary.

** IP-Coster compiles data from publicly available sources. If this data includes your personal information, you can contact us to request its removal.

Quotation for National Phase entry

Country StagesTotal
China Filing, Examination, Granting2405
EPO Filing, Examination, Granting11561
Japan Filing, Examination, Granting2307
South Korea Filing, Examination, Granting2385
USA Filing, Examination, Granting4740
MasterCard Visa
Total: 23,398
Contact Us
Abstract[English] An electronic device for event-based multimedia segment classification from cross-modal features of multimedia content is disclosed. The electronic device receives multimedia content including a set of multimedia segments associated with a plurality of modalities. The electronic device determines, for each modality, a set of features associated with the multimedia content, based on an encoder model and applies a bottleneck attention model on the set of features. The electronic device determines cross-modal fused features for the plurality of modalities, based on the application of the bottleneck attention model and segregates cross-modal fused features into a set of nodes, based on one or more events associated with the multimedia content. The electronic device applies a classifier model on the segregated cross-modal fused features and classifies each multimedia segment into the one or more events, based on application of the classifier model.[French] Un dispositif électronique pour une classification de segment multimédia basée sur un événement à partir de caractéristiques intermodales de contenu multimédia est divulgué. Le dispositif électronique reçoit un contenu multimédia comprenant un ensemble de segments multimédia associés à une pluralité de modalités. Le dispositif électronique détermine, pour chaque modalité, un ensemble de caractéristiques associées au contenu multimédia, sur la base d'un modèle de codeur et applique un modèle d'attention de goulot d'étranglement sur l'ensemble de caractéristiques. Le dispositif électronique détermine des caractéristiques fusionnées intermodales pour la pluralité de modalités, sur la base de l'application du modèle d'attention de goulot d'étranglement et sépare des caractéristiques fusionnées intermodales en un ensemble de nœuds, sur la base d'un ou de plusieurs événements associés au contenu multimédia. Le dispositif électronique applique un modèle de classificateur sur les caractéristiques fusionnées intermodales séparées et classifie chaque segment multimédia dans le ou les événements, sur la base de l'application du modèle de classificateur.