uu77

Robot
Robot

BLISS

Op gedrag gebaseerde taalinteractieve spreeksystemen

Het beschikbaar komen van grote hoeveelheden persoonlijke data (Big Data) en de enorme verbeteringen die recentelijk zijn geboekt in taal- en spraaktechnologie, bieden nieuwe kansen voor self-management en empowerment van cliënten in de zorg. Dit onderzoeksvoorstel gaat uit van een brede definitie van gezondheid en welzijn als geluk en heeft als doel het ontwikkelen van een interactief, Nederlands sprekend systeem dat mensen helpt hun welzijn en geluk te verhogen. Het idee is om grote hoeveelheden persoonlijke data van cliënten (teksten, interviews, dialogen) te doorzoeken om informatie eruit te halen over hun gezondheid en welzijn en om te weten te komen wat hen gelukkig maakt. Om dit mogelijk te maken wordt technologie ontwikkeld die relevante informatie uit Nederlandse teksten en audio-opnames kan halen. Vervolgens kan deze informatie gebruikt worden om computerprogramma’s te ontwerpen die met mensen laagdrempelig, in gesproken Nederlands kunnen communiceren om hen te ondersteunen in hun dagelijks handelen en het beheren van hun gezondheid en welzijn. De informatie uit Big Data kan hierbij gebruikt worden om het systeem te personaliseren voor individuele cliënten zodat het rekening houdt met persoonlijke behoeftes en achtergrond.

Dit onderzoeksvoorstel is in verschillende opzichten innovatief. Onderzoek met Big Data was tot nu toe voornamelijk gebaseerd op geschreven data, terwijl in dit project ook gebruik wordt gemaakt van gesproken interviews, omdat deze nu veel meer worden verzameld dan geschreven vragenlijsten. Het voordeel is ook dat gesproken data veel meer informatie bevatten dan teksten (zoals intonatie, nadruk, aarzelingen, etc.). Verder is dit onderzoek nieuw omdat er laagdrempelige computerprogramma’s worden ontwikkeld die met mensen kunnen spreken zodat ze ook geschikt zijn voor laagopgeleiden, slechtzienden en mensen met beperkingen. Nieuw is ook dat de communicatie intelligent is en gepersonaliseerd, zodat mensen uiteindelijk geholpen worden zelf de regie te voeren over hun gezondheid, welzijn en geluk. Tenslotte is dit onderzoek innovatief omdat de technologie wordt ontwikkeld voor de Nederlandse taal, omdat het voor cliënten belangrijk is dat ze aangesproken worden in hun moedertaal.

Dit onderzoek zal verschillende resultaten opleveren. Ten eerste belangrijke Nederlandstalige technologie om grote hoeveelheden teksten en opnames over en van cliënten te analyseren en daaruit relevante informatie over hun gezondheid en welzijn te halen. Deze technologie kan ook voor andere doeleinden worden gebruikt, zoals het verbeteren van een spraakherkenningssysteem. Verder levert dit project ook kennis op over een interactief systeem dat in het Nederlands kan spreken, hun antwoorden kan begrijpen en zelf beschikt over belangrijke informatie over de cliënten die ze kunnen gebruiken om hun welzijn te verbeteren, zodat ze zelf de regie houden. Ook dit systeem kan eventueel voor andere toepassingen in de zorg worden ingezet. Belangrijke resultaten zijn uiteraard ook de kennis en de inzichten die verkregen zullen worden over wat voor wie het beste werkt.

Resultaten

  • 2022-11-03 Presentation at , Den Haag, “Klik hier om uw gezondheid te verbeteren – Een sessie over recente wetenschappelijke inzichten over digitale zorg”, Wolter Pieters, Iris Hendrickx, Lisa Rosenberger, uu77
  • To disclose or not to disclose – is talking to a personalized voicebot more fun?, Jelte van Waterschoot, Wieke Harmsen and Iris Hendrickx, Poster at CLIN32, June 2022, Tilburg
  • , Tom Sweers, Iris Hendrickx and Helmer Strik at LREC 2022, June 2022
  • , Virginia Meijer and Iris Hendrickx, at LREC 2022, June 2022
  • Talk at the , Iris Hendrickx, Utrecht, 3 June, 2022

  • 2 December 2021, online co-organized by Jelte van Waterschoot
  • Jelte van Waterschoot. Personalized and Personal Conversations – Designing Agents Who Want to Connect With You, , University of Twente, 2 December 2021
  • poster presentation Jelte van Waterschoot and Iris Hendrickx, A Spoken Dutch Conversational Agent for Stimulating Self-management of Happiness at the 31st Meeting of Computational Linguistics in The Netherlands (CLIN 31), Gent/online
  • Presentation Tom Sweers and Iris Hendrickx, Negation Detection in Dutch Spoken Human-Computer Conversations,31st Meeting of Computational Linguistics in The Netherlands (CLIN 31), Gent/online
  • Virginia Meijer and Iris Hendrickx presented at SummDial: A SIGDial 2021 Special Session on , 29 juli 2021. 
  • We co-organized the ACM UMAP workshop ‘Towards a new generation of Personalized Intelligent Conversational Agents’, 25 June 2021
  • workshop paper: Jelte van Waterschoot et al., , April 13th, Joint Proceedings of the ACM IUI 2021 Workshops, Workshop on Theoretical and Methodological Challenges in Intelligent Conversational User Interface Interactions, CEUR, College Station (Virtual), Texas, USA
  • workshop paper: Iris Hendrickx et al., , April 13th, Joint Proceedings of the ACM IUI 2021 Workshops, Workshop on Theoretical and Methodological Challenges in Intelligent Conversational User Interface Interactions, CEUR, College Station (Virtual), Texas, USA
  • Jelte van Waterschoot and Mariët Theune. Evaluating Conversational Question Generation: CoffeeBot. March 8th, HRI 2021 , ACM, Boulder (Virtual), CA, USA 2021
  • Loes van Uffelen, Jelte van Waterschoot and Mariët Theune. Show Me Yours if I Show You Mine: Self-disclosure in Conversational Agents. March 8th, HRI 2021 , ACM, Boulder (Virtual), CA, USA 2021
  • Catia Cucchiarini et al, , BLISS dialoogsysteem: EEN SPREKENDE INTERACTIEVE ASSISTENT DIE ZORGT VOOR MEER AUTONOMIE IN JE EIGEN WELBEVINDEN, p18-19, Nijmegen, 17e jaargang, 2020
  • van Waterschoot, J., Hendrickx, I., Khan, A., Klabbers, E., de Korte, M., Strik, H., Cucchiarini, C., & Theune, M. (2020). . In Proceedings of the12th International Conference on Language Resources and Evaluation (LREC 2020) (pp. 449-458). European Language Resources Association (ELRA).
  • BLISS@, Utrecht, 30 January, 2020

Financiering

Dit project is onderdeel van het onderzoeksprogramma Data2Person, dat deels wordt gefinancieerd door de Nederlandse organisatie voor Wetenschappelijk Onderzoek (NWO).

Partners

  • Universiteit van Twente
  • Games for Health 
  • Readspeaker

Team

  • Centre for Language and Speech Technology (CLST), uu77: Helmer Strik, Catia Cucchiarini, Louis ten Bosch, Iris Hendrickx and Wieke Harmsen
  • , University of Twente: Mariët Theune and Jelte van Waterschoot
  • : Jurriaan van Rijswijk, Rob Tieben, Kitty van der Ploeg and Werner Rutten, Simone Coenen
  • : Staffan Meij, Bert Oldewarris , Esther Judd-Klabbers, Marcel de Korte
  • Former members: Arif Kahn, uu77, and Joost Hermans, GSL

Contactinformatie