WO2025233687 - SYSTEMS AND METHODS FOR AI GENERATION OF IMAGE CAPTIONS ENRICHED WITH MULTIPLE AI MODALITIES
National phase entry is expected:
Publication Number
WO/2025/233687
Publication Date
13.11.2025
International Application No.
PCT/IB2025/000311
International Filing Date
08.05.2025
Title **
[English]
SYSTEMS AND METHODS FOR AI GENERATION OF IMAGE CAPTIONS ENRICHED WITH MULTIPLE AI MODALITIES
[French]
SYSTÈMES ET PROCÉDÉS DE GÉNÉRATION PAR IA DE LÉGENDES D'IMAGE ENRICHIES AVEC DE MULTIPLES MODALITÉS D'IA
Applicants **
NEWSBRIDGE SAS
Inventors
PETITPONT, Frédéric
TEVISSEN, Yannis
GUETARI, Khalil
Priority Data
18/659,800
09.05.2024
US
Application details
| Total Number of Claims/PCT | * |
| Number of Independent Claims | * |
| Number of Priorities | * |
| Number of Multi-Dependent Claims | * |
| Number of Drawings | * |
| Pages for Publication | * |
| Number of Pages with Drawings | * |
| Pages of Specification | * |
| * | |
| Number of Office Actions | * |
| * | |
International Searching Authority |
EPO
* |
| Recordal of a Change of the Applicant's Name/Address |
Change of Applicant's Name and Address
* |
| Type of Assignment |
The Standard Agent's Assignment
* |
| Applicant's Legal Status |
Legal Entity
* |
| * | |
| * | |
| * | |
| * | |
| * | |
| Entry into National Phase under |
Chapter I
* |
| Patent Delivery |
Send the Letters Patent by Courier
* |
| Translation |
|
* The data is based on automatic recognition. Please verify and amend if necessary.
** IP-Coster compiles data from publicly available sources. If this data includes your personal information, you can contact us to request its removal.
Quotation for National Phase entry
| Country | Stages | Total | |
|---|---|---|---|
| China | Filing, Examination, Granting | 2367 | |
| EPO | Filing, Examination, Granting | 11399 | |
| Japan | Filing, Examination, Granting | 2329 | |
| South Korea | Filing, Examination, Granting | 2359 | |
| USA | Filing, Examination, Granting | 4740 |
Total:
23,194
Contact Us
Abstract[English]
Systems and methods of the present disclosure enable enriching an artificial intelligence (AI)- generated caption including a textual description of an image. The image and the textual description is input into vision transformer model to produce heat map for the image, the heat map including a representation of a degree of significance of portion of the image to an identification of an item in the textual description based at least in part on the gradient. The image is input into an expert recognition machine learning model to output bounding box including label representative of the item. A spatial alignment within the image between the bounding box and the portion of the heat map is determined. The textual description of the Al-generated caption is modified to include the label of the item based on the spatial alignment within the image so as to produce a modified Al-generated caption associated with the item.[French]
Des systèmes et des procédés de la présente divulgation permettent d'enrichir une légende générée par intelligence artificielle (IA) comprenant une description textuelle d'une image. L'image et la description textuelle sont entrées dans un modèle de transformateur de vision pour produire une carte thermique pour l'image, la carte thermique comprenant une représentation d'un degré d'importance d'une partie de l'image pour l'identification d'un élément dans la description textuelle sur la base, au moins en partie, du gradient. L'image est entrée dans un modèle d'apprentissage automatique de reconnaissance experte pour délivrer en sortie une boîte de délimitation comprenant une étiquette représentative de l'article. Un alignement spatial dans l'image entre la boîte de délimitation et la partie de la carte thermique est déterminé. La description textuelle de la légende générée par IA est modifiée pour inclure l'étiquette de l'élément sur la base de l'alignement spatial dans l'image de façon à produire une légende générée par IA modifiée associée à l'élément.