Ce web service détecte, pour chaque document en anglais d’un corpus, les entités nommées de localisation et les contextualise. Si un alignement s’effectue avec le référentiel GeoNames, le lien vers la fiche web de l’entité est retourné.

Le programme utilise dans un premier temps un modèle de détection d’entités nommées basé sur l’architecture BERT, afin d’extraire les entités de type localisation. Ensuite pour chaque entité, on extrait les possibilités d’alignement de la base GeoNames. Pour déterminer le meilleur alignement parmi toutes les propositions, on fait appel à un LLM du service IlaaS chargé de déduire, à partir du contexte d’apparition du mot, le meilleur choix. Si un alignement correspond, il sera renvoyé un lien vers la fiche web du terme GeoNames.

• GeoNames

• Jacob Devlin, Ming-Wei Chang, Kenton Lee, Kristina Toutanova, BERT: Pre-training of Deep Bidirectional Transformers for Language Understanding

• Infrastructure d’IA mutualisée ILaaS.

• LLM utilisé : gemma4-31b.

Enrichissement à l'aide des vocabulaires Loterre

Extraction d'entités nommées (Personnes, Localisations, Organismes)

Utilisation dans TDM Factory

Ce web service se lance sur un texte scientifique en anglais au format txt (UTF8).

texte

==>

entity context alignment Russia drastic declines in the domestic meat production in post-Soviet ||Russia|| after 1990 resulted in a steep increase in meat imports www.geonames.org/10230127 Russia studies suggest that the transition in Eastern Europe and the former Soviet Union countries, including ||Russia||, resulted in urban sprawl . www.geonames.org/10230127 Russia In post-Soviet ||Russia|| alone, more than 40 million hectares of arable land www.geonames.org/10230127 Brazil resulted in a steep increase in meat imports from ||Brazil|| (Novozhenina et al ), which contributed to deforestation in Amazonia Eastern Europe natural experiment of the collapse of socialism in ||Eastern Europe|| and the former Soviet Union www.geonames.org/7729884