WELCOME - Multiple Intelligent Conversation Agent Sevices for Reception, Management and Integration of Third Country Nationals

Název česky

Vícenásobné služby inteligentního konverzačního agenta pro přijetí, řízení a integraci občanů třetích zemí v EU

Typ

grant

Abstrakt

Cílem projektu WELCOME je výzkum a vývoj inteligentních technologií na podporu přijímání a integrace migrantů v Evropě. Na rozdíl od většiny projektů, které se zabývají problémem integrace migrantů prostřednictvím frontend s rozhraním one-for-all" pro získávání informací a služeb, WELCOME nabídne personalizované a psychologicky a sociálně kompetentní řešení pro migranty i veřejnou správu. Bude rozvíjet pohlcující a inteligentní služby, ve kterých budou inteligentní vícejazyční agenti působit jako oddaní personalizovaní asistenti migrantů v kontextu registrace, orientace, výuky jazyků, občanského vzdělávání a sociálního a společenského začlenění. Agenti budou personalizováni v tom smyslu, že dynamicky přizpůsobí své interakční chování tématu, danému kontextu a profilu účastníka. Pro zajištění reálného" zážitku, a tím i hlubší a rychlejší integrace, budou použity pohlcující virtuální a rozšířené technologie. Pro orgány veřejné správy budou vyvinuty technologie na podporu rozhodování, které budou vycházet z metod vizuální analýzy a sémantického uvažování. K dosažení tohoto cíle bude společnost WELCOME inovovat v oblasti interakce agentů s více pracovníky, vícejazyčných technologií mluveného jazyka, zpracování znalostí, pohlcujícího personalizovaného vzdělávání a technologií sociálního začleňování a strategií podpory rozhodování. Řešení WELCOME bude ověřeno a jeho přenositelnost do různých evropských souvislostí prokázána ve třech případech pilotního využití. Očekává se, že WELCOME jako celek i jeho jednotlivé technologie budou mít velmi významný společenský a ekonomický dopad. WELCOME s vysoce kompetentním konsorciem 15 partnerů: 6 výzkumných institucí, 3 ICT společnosti a 6 subjektů souvisejících s příjmem a integrací migrantů. Pro zvýšení svého vlivu a šíření informací, WELCOME v rámci Mezinárodní subdodavatelské organizace International Migrant Organization.

Řešitelé

Černocký Jan, prof. Dr. Ing. (UPGM FIT VUT) , hlavní řešitel
Burget Lukáš, doc. Ing., Ph.D. (UPGM FIT VUT) , spoluřešitel
Karafiát Martin, Ing., Ph.D. (UPGM FIT VUT) , spoluřešitel
Kocour Martin, Ing. (UPGM FIT VUT)
Plchot Oldřich, Ing., Ph.D. (UPGM FIT VUT)
Žižka Josef, Ing. (UPGM FIT VUT)

Podpora

[img]
Tento projekt získal financování z programu Evropské unie pro výzkum a inovace Horizont 2020 na základě grantové dohody č. 870930.

Publikace

2023

YUSUF Bolaji, ČERNOCKÝ Jan a SARAÇLAR Murat. End-to-End Open Vocabulary Keyword Search With Multilingual Neural Representations. IEEE/ACM TRANSACTIONS ON AUDIO, SPEECH AND LANGUAGE PROCESSING, roč. 31, č. 08, 2023, s. 3070-3080. ISSN 2329-9290. Detail

2022

ŠVEC Ján, ŽMOLÍKOVÁ Kateřina, KOCOUR Martin, DELCROIX Marc, OCHIAI Tsubasa, MOŠNER Ladislav a ČERNOCKÝ Jan. Analysis of impact of emotions on target speech extraction and speech separation. In: Proceedings of The 17th International Workshop on Acoustic Signal Enhancement (IWAENC 2022). Bamberg: IEEE Signal Processing Society, 2022, s. 1-5. ISBN 978-1-6654-6867-1. Detail
ONDEL Yang Lucas Antoine Francois, YUSUF Bolaji, BURGET Lukáš a SARAÇLAR Murat. Non-Parametric Bayesian Subspace Models for Acoustic Unit Discovery. IEEE/ACM TRANSACTIONS ON AUDIO, SPEECH AND LANGUAGE PROCESSING, roč. 30, č. 5, 2022, s. 1902-1917. ISSN 2329-9290. Detail
EGOROVA Ekaterina, VYDANA Hari K., BURGET Lukáš a ČERNOCKÝ Jan. Spelling-Aware Word-Based End-to-End ASR. IEEE Signal Processing Letters, roč. 29, č. 29, 2022, s. 1729-1733. ISSN 1558-2361. Detail

2021

YUSUF Bolaji, ONDEL Yang Lucas Antoine Francois, BURGET Lukáš, ČERNOCKÝ Jan a SARAÇLAR Murat. A Hierarchical Subspace Model for Language-Attuned Acoustic Unit Discovery. In: ICASSP 2021 - 2021 IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP). Toronto, Ontario: IEEE Signal Processing Society, 2021, s. 3710-3714. ISBN 978-1-7281-7605-5. Detail
YUSUF Bolaji, GOK Alican, GUNDOGDU Batuhan a SARAÇLAR Murat. End-to-End Open Vocabulary Keyword Search. In: Proceedings Interspeech 2021. Brno: International Speech Communication Association, 2021, s. 4388-4392. ISSN 1990-9772. Detail
EGOROVA Ekaterina, VYDANA Hari K., BURGET Lukáš a ČERNOCKÝ Jan. Out-of-Vocabulary Words Detection with Attention and CTC Alignments in an End-to-End ASR System. In: Proceedings Interspeech 2021. Brno: International Speech Communication Association, 2021, s. 2901-2905. ISSN 1990-9772. Detail
WANNER Leo, KLUSCH Matthias, MAVROPOULOS Athanasios, JAMIN Emmanuel, MARIN Puchades Victor, CASAMAYOR Gerard, ČERNOCKÝ Jan a EGOROVA Ekaterina a kol. Towards a Versatile Intelligent Conversational Agent as Personal Assistant for Migrants. In: The PAAMS Collection. PAAMS 2021: Advances in Practical Applications of Agents, Multi-Agent Systems, and Social Good. . Lecture Notes in Computer Science book series , roč. 12946. Salamanca: Springer International Publishing, 2021, s. 316-327. ISBN 978-3-030-85739-4. ISSN 0302-9743. Detail