Sentiment sensing: comparative analysis of multilingual sentiment dynamics
Organizations: European Commission, Joint Research Centre (JRC), Ispra, Italy · FINCONS SPA, Vimercate, Italy
Abstract
Cross-country sentiment analysis faces three fundamental challenges: language-specific biases distort comparisons, compositional data constraints invalidate standard statistics and temporal dynamics lack rigorous testing frameworks. We introduce sentiment sensing, a framework that addresses these gaps through integrated statistical methods. By combining compositional data analysis, functional data methods, and non-parametric inference, sentiment sensing enables valid multilingual comparisons and statistically defensible detection of sentiment shifts. Our framework has been tested in two case studies, analyzing news articles from the 27 countries of the European Union on the topics of energy and artificial intelligence. Sentiment sensing focuses on multilingual sentiment analysis enabling rigorous comparative science.
Figures & tables
Appendix figures & tables15 assets
Supplementary material from the paper’s appendix.
Appendix
| Dataset | Keywords |
|---|---|
| Energy | ‘‘energy’’ ‘‘energiya’’ (BG) ‘‘energie’’ ‘‘energi’’ ‘‘energieversgung’’ ‘‘energeia’’ (EL) ‘‘energía’’ ‘‘energia’’ ‘‘énergie’’ ‘‘fuinneamh’’ ‘‘energija’’ ‘‘l’energia’’ ‘‘energijos’’ ‘‘energetikis’’ (LV) ‘‘energija’’ (MT) ‘‘gas’’ ‘‘gaz’’ (BG) ‘‘plynový’’ ‘‘gase’’ ‘‘aerio’’ (EL) ‘‘gaas’’ ‘‘kaasu’’ ‘‘gaz’’ ‘‘gás’’ ‘‘plin’’ ‘‘gáz’’ ‘‘duju’’ (LT) ‘‘gazes’’ (LV) ‘‘gaze’’ (LV) ‘‘gass’’ ‘‘gaze’’ ‘‘plyn’’ ‘‘plinski’’ ‘‘heating’’ ‘‘otoplenie’’ (BG) ‘‘vytápění’’ ‘‘opvarmning’’ ‘‘Heizung’’ ‘‘Thermansi’’ (EL) ‘‘calefacción’’ ‘‘Küte’’ ‘‘Lämmitys’’ ‘‘chauffage’’ ‘‘téamh’’ ‘‘grijanje’’ ‘‘fűtés’’ ‘‘riscaldamento’’ ‘‘šildymas’’ ‘‘apkures sistemas’’ (LV) ‘‘tishin’’ (MT) ‘‘verwarmen’’ ‘‘ogrzewanie’’ ‘‘aquecimento’’ ‘‘^incălzire’’ ‘‘vykurovanie’’ ‘‘ogrevanje’’ ‘‘uppvärmning’’ ‘‘electricity’’ ‘‘elektrichestvo’’ (BG) ‘‘elektřina’’ ‘‘elektricitet’’ ‘‘elektrische energie’’ ‘‘ilektriki energeia’’ (EL) ‘‘electricidad’’ ‘‘elekter’’ ‘‘sähkö’’ ‘‘électricité’’ ‘‘leictreachas’’ ‘‘električna energija’’ ‘‘energia elettrica’’ ‘‘elektros energija’’ ‘‘elektriba’’ (LV) ‘‘elettriku’’ ‘‘elektriciteit’’ ‘‘elektryczność’’ ‘‘eletricidade’’ ‘‘electricitate’’ ‘‘elektrina’’ ‘‘elektrika’’ ‘‘electricitet’’ ‘‘electric current’’ ‘‘elektricheski tok’’ (BG) ‘‘elektrický proud’’ ‘‘elektrisk strøm’’ ‘‘elektrischer Strom’’ ‘‘ilektriko revma’’ (EL) ‘‘criente eléctrica’’ ‘‘elektrivool’’ ‘‘sähkövirta’’ ‘‘courant électrique’’ ‘‘leictreach atá ann faoi láthair’’ ‘‘električna struja’’ ‘‘elektromos áram’’ ‘‘crente elettrica’’ ‘‘elektros srove’’ (LT) ‘‘elektriska strava’’ (LV) ‘‘kurrent elettriku’’ ‘‘elektrische stroom’’ ‘‘prad elektryczny’’ (PL) ‘‘crente elétrica’’ ‘‘curent electric’’ ‘‘elektrický prúd’’ ‘‘električni tok’’ ‘‘elektrisk ström’’ ‘‘light’’ ‘‘svetlina’’ (BG) ‘‘světlo’’ ‘‘lys’’ ‘‘licht’’ ‘‘fos’’ (EL) ‘‘luz’’ ‘‘valgus’’ ‘‘valo’’ ‘‘lumière’’ ‘‘solas’’ ‘‘svjetlo’’ ‘‘világítás’’ ‘‘luce’’ ‘‘šviesos’’ ‘‘gaismas lukturis’’ ‘‘dawl’’ ‘‘licht’’ ‘‘światło’’ ‘‘lumină’’ ‘‘svetlo’’ ‘‘svetloba’’ ‘‘ljus’’ ‘‘fuel’’ ‘‘gorivo’’ (BG) ‘‘pohonné hmoty’’ ‘‘brændstof’’ ‘‘Kraftstoffe’’ ‘‘kafsima’’ (EL) ‘‘combustible’’ ‘‘kütus’’ ‘‘polttoaine’’ ‘‘carburant’’ ‘‘breosla’’ ‘‘givo’’ ‘‘üzemanyag’’ ‘‘carburante’’ ‘‘kuras’’ ‘‘degvielas uzpildes stacijas’’ ‘‘fjuwil’’ ‘‘brandstof’’ ‘‘paliwo’’ ‘‘combustível’’ ‘‘combustibil’’ ‘‘palivo’’ ‘‘bränsle’’ ‘‘gasoline’’ ‘‘benzin’’ (BG) ‘‘benzín’’ ‘‘benzin’’ ‘‘Benzin’’ ‘‘venzini’’ (EL) ‘‘gasolina’’ ‘‘bensiin’’ ‘‘bensiini’’ ‘‘essence’’ ‘‘gásailín’’ ‘‘benzina’’ ‘‘benzinas’’ ‘‘benzins’’ (LV) ‘‘gazolina’’ (MT) ‘‘benzine’’ ‘‘benzyna’’ ‘‘benzină’’ ‘‘bencin’’ ‘‘bensin’’ ‘‘diesel’’ ‘‘dizel’’ (BG) ‘‘nafta’’ ‘‘Dieselkraftstoff’’ ‘‘ntizel’’ (EL) ‘‘diésel’’ ‘‘diislikütus’’ ‘‘díosal’’ ‘‘dizel’’ ‘‘dízel’’ ‘‘gasolio’’ ‘‘Dyzelinas’’ ‘‘Dizeldegviela’’ (LV) ‘‘dizil’’ (MT) ‘‘olej napędowy’’ ‘‘gasóleo’’ ‘‘motină’’ ‘‘dizelsko givo’’ |
| AI | ‘‘ai’’ ‘‘artificial intelligence’’ ‘‘izkustven intelekt’’ (BG) ‘‘umělá inteligence’’ ‘‘kunstig intelligens’’ ‘‘künstliche Intelligenz’’ ‘‘techniti noimosini’’ (EL) ‘‘inteligencia artificial’’ ‘‘tehisintellekt’’ ‘‘tekoäly’’ ‘‘intelligence artificielle’’ ‘‘intleacht shaorga’’ ‘‘umjetna inteligencija’’ ‘‘mesterséges intelligencia’’ ‘‘intelligenza artificiale’’ ‘‘dirbtinis intelektas’’ ‘‘makslīgais intelekts’’ (LV) ‘‘intelligenza artificjali’’ (MT) ‘‘kunstmatige intelligentie’’ ‘‘sztuczna inteligencja’’ ‘‘intelig^encia artificial’’ ‘‘inteligenta artificiala’’ (RO) ‘‘umelá inteligencia’’ ‘‘umetna inteligenca’’ ‘‘artificiell intelligens’’ |
| baseline |