COnversational BRAins

Leistungen

Public understanding event

Public understanding event M21

First Summer School

First Summer School E3 M21

First Winter School

First Winter School E2 M16

Veröffentlichungen

Unsupervised Auditory and Semantic Entrainment Models with Deep Neural Networks

Autoren: Jay Kejriwal, Štefan Beňuš, Lina M. Rojas-Barahona
Veröffentlicht in: INTERSPEECH 2023, Ausgabe 2023, 2024, Seite(n) 2628-2632
Herausgeber: ISCA
DOI: 10.21437/interspeech.2023-1929

Speech Adaptation and Physiological Responses: A Study on f0 and Skin Temperature

Autoren: Thomaz Offrede, Christine Mooshammer, Alessandro D'Ausilio, Susanne Fuchs
Veröffentlicht in: Speech Prosody, Ausgabe 2024, 2024
Herausgeber: Speech Prosody

Intonation Control for Neural Text-to-Speech Synthesis with Polynomial Models of F0

Autoren: Niamh Corkey, Johannah O'Mahony, Simon King
Veröffentlicht in: Proc. INTERSPEECH 2023, Ausgabe 2023, 2023, Seite(n) 2014-2015
Herausgeber: ISCA

Relationship between auditory and semantic entrainment using Deep Neural Networks (DNN)

Autoren: Jay Kejriwal, Štefan Beňuš
Veröffentlicht in: INTERSPEECH 2023, Ausgabe 2023, 2024, Seite(n) 2623-2627
Herausgeber: ISCA
DOI: 10.21437/interspeech.2023-1947

Speech Entrainment and Emotion

Autoren: Jay Kejriwal, Štefan Beňuš
Veröffentlicht in: 2023 14th IEEE International Conference on Cognitive Infocommunications (CogInfoCom), Ausgabe 2023, 2024, Seite(n) 99-104
Herausgeber: IEEE
DOI: 10.1109/coginfocom59411.2023.10397502

Investigating the Perception Production Link through Perceptual Adaptation and Phonetic Convergence.

Autoren: Lena-Marie Huttner, Noel Nguyen, Martin J. Pickering
Veröffentlicht in: Proc INTERSPEECH 2023, Ausgabe 2023, 2023, Seite(n) 3103-3107
Herausgeber: ISCA

A Hierarchical Predictive Processing Approach to Modelling Prosody

Autoren: Juraj Šimko, Adaeze Adigwe, Antti Suni, Martti Vainio
Veröffentlicht in: Speech Prosody 2022, Ausgabe 2022, 2024
Herausgeber: ISCA
DOI: 10.21437/speechprosody.2022-86

Investigating the relationship between prosodic entrainment and interaction style

Autoren: Joanna Kruyt, Lena-Marie Huttner, Johannah O'Mahony
Veröffentlicht in: Proceedings of the 20th International Congress of Phonetic Sciences, Ausgabe 2023, 2023, Seite(n) 3492-3496, ISBN 978-80-908114-2-3
Herausgeber: GUARANT International spol. s r.o.

Hierarchical Intonation Modelling for Speech Synthesis using Legendre Polynomial Coefficients

Autoren: Johannah O'Mahony, Niamh Corkey, Catherine Lai, Esther Klabbers, Simon King
Veröffentlicht in: Speech Prosody 2024, Ausgabe 2024, 2024
Herausgeber: ISCA
DOI: 10.21437/speechprosody.2024-208

Lexical entrainment on target words during task-oriented interaction in children with and without autism spectrum disorder

Autoren: Kruyt, J., Polónyiová, K., Ostatníková, D., Beňuš, Š.
Veröffentlicht in: Proceedings of the 27th Workshop on the Semantics and Pragmatics of Dialogue, Ausgabe August 2023, 2023, Seite(n) 6-14
Herausgeber: Proceedings of the 27th Workshop on the Semantics and Pragmatics of Dialogue

What does BERT learn about prosody?

Autoren: Kakouros, Sofoklis; O'Mahony, Johannah
Veröffentlicht in: in R Skarnitzl & J Volín (eds) , Proceedings of the 20th International Congress of Phonetic Sciences (ICPhS), Ausgabe 19, 2023, Seite(n) 1454-1458, ISBN 978-80-908114-2-4
Herausgeber: GUARANT International spol. s r.o.
DOI: 10.48550/arxiv.2304.12706

Do Humans Converge Phonetically When Talking to a Robot?

Autoren: Thomaz Offrede, Chinmaya Mishra, Gabriel Skantze, Susanne Fuchs, Christine Mooshammer
Veröffentlicht in: International Congress of Phonetic Sciences (ICPhS), Ausgabe 2023, 2023, Seite(n) 3507--3511, ISBN 978-80-908114-2-3
Herausgeber: GUARANT International spol. s r.o.

The ART of Conversation: Measuring Phonetic Convergence and Deliberate Imitation in L2-Speech with a Siamese RNN

Autoren: Zheng Yuan, Aldo Pastore, Dorina de Jong, Hao Xu, Luciano Fadiga, Alessandro D'Ausilio
Veröffentlicht in: INTERSPEECH 2023, Ausgabe August 2023, 2024, Seite(n) 132--136
Herausgeber: ISCA
DOI: 10.21437/interspeech.2023-2283

Annotation of Communicative Functions of Short Feedback Tokens in Switchboard

Autoren: Figueroa, Carol; Adigwe, Adaeze; Ochs, Magalie; Skantze, Gabriel
Veröffentlicht in: Proceedings of the 13th Conference on Language Resources and Evaluation, Jun 2022, Marseille, France, Ausgabe 10, 2022, Seite(n) 1849–1859
Herausgeber: Proceedings of the 13th Conference on Language Resources and Envaluation (LREC 2022)

Strategies for developing a Conversational Speech Dataset for Text-To-Speech Synthesis

Autoren: Adaeze O. Adigwe, Esther Klabbers
Veröffentlicht in: Interspeech 2022, Ausgabe 2022, 2024
Herausgeber: ISCA
DOI: 10.21437/interspeech.2022-10802

Synthesis after a couple PINTs: Investigating the Role of Pause-Internal Phonetic Particles in Speech Synthesis and Perception

Autoren: Mikey Elmers, Johannah O'Mahony, Éva Székely
Veröffentlicht in: INTERSPEECH 2023, Ausgabe 2023, 2024, Seite(n) 4843-4847
Herausgeber: ISCA
DOI: 10.21437/interspeech.2023-2178

Stress detection using non-semantic speech representation

Autoren: Jay Kejriwal, Stefan Benus, Marian Trnka
Veröffentlicht in: 2022 32nd International Conference Radioelektronika (RADIOELEKTRONIKA), Ausgabe 2022, 2022, Seite(n) 1-5
Herausgeber: IEEE
DOI: 10.1109/radioelektronika54537.2022.9764916

The effects of prediction in conversational alignment

Autoren: Kerr, E., Strijkers, K.
Veröffentlicht in: Proceedings of the 44th Annual Conference of the Cognitive Science Society, Ausgabe Volume 44, 2022
Herausgeber: Proceedings of the Annual Meeting of the Cognitive Science Society

Comparing acoustic and textual representations of previous linguistic context for improving Text-to-Speech

Autoren: Pilar Oplustil-Gallegos, Johannah O'Mahony, Simon King
Veröffentlicht in: 11th ISCA Speech Synthesis Workshop (SSW 11), Ausgabe 2021, 2024, Seite(n) 205-210
Herausgeber: ISCA
DOI: 10.21437/ssw.2021-36

Relationship between speech entrainment and emotion

Autoren: Jay Kejriwal
Veröffentlicht in: 2022 10th International Conference on Affective Computing and Intelligent Interaction Workshops and Demos (ACIIW), Ausgabe 2022, 2024, Seite(n) 1-4
Herausgeber: IEEE
DOI: 10.1109/aciiw57231.2022.10086027

An analysis on the effects of speaker embedding choice in non auto-regressive TTS

Autoren: Adriana Stan, Johannah O'Mahony
Veröffentlicht in: 12th ISCA Speech Synthesis Workshop (SSW2023), Ausgabe 2023, 2024, Seite(n) 134-138
Herausgeber: ISCA
DOI: 10.21437/ssw.2023-21

The role of production in perceptual learning

Autoren: Lena-Marie Huttner, Noel Nguyen, Martin J. Pickering
Veröffentlicht in: Proceedings of the 20th International Congress of Phonetic Sciences, Ausgabe 2023, 2023, Seite(n) 496-500
Herausgeber: GUARANT International spol. s r.o.

Prosodic Alignment in Different Conversational Feedback Functions

Autoren: Figueroa, Carol; Beňuš, Štefan; Skantze, Gabriel
Veröffentlicht in: 20th International Congress of Phonetic Sciences (ICPhS), Aug 2023, Prague, Czech Republic, Ausgabe 1, 2023
Herausgeber: 20th International Congress of Phonetic Sciences (ICPHS)

ART: The Alternating Reading Task Corpus for Speech Entrainment and Imitation

Autoren: Zheng Yuan, Dorina de Jong, Ruitao Feng, Štefan Beňuš, Noël Nguyen, Róbert Sabo, Luciano Fadiga, Alessandro D’Ausilio
Veröffentlicht in: Proceedings of the 2024 Joint International Conference on Computational Linguistics, Language Resources and Evaluation (LREC-COLING 2024), Ausgabe May 2024, 2024, Seite(n) 1548–1562
Herausgeber: ELRA and ICCL

The ADAIO System at the BEA-2023 Shared Task: Shared Task Generating AI Teacher Responses in Educational Dialogues

Autoren: Adaeze Adigwe, Zheng Yuan
Veröffentlicht in: Proceedings of the 18th Workshop on Innovative Use of NLP for Building Educational Applications (BEA 2023), Ausgabe July 2023, 2023, Seite(n) 796–804
Herausgeber: Association for Computational Linguistics
DOI: 10.18653/v1/2023.bea-1.65

Classification of Feedback Functions in Spoken Dialog Using Large Language Models and Prosodic Features

Autoren: Carol Figueroa, Magalie Ochs, Gabriel Skantze
Veröffentlicht in: Proceedings of the 27th Workshop on the Semantics and Pragmatics of Dialogue, Ausgabe August, 16–17, 2023, 2023
Herausgeber: Proceedings of the 27th Workshop on the Semantics and Pragmatics of Dialogue

Synthesising turn-taking cues using natural conversational data

Autoren: Johannah O'Mahony, Catherine Lai, Simon King
Veröffentlicht in: 12th ISCA Speech Synthesis Workshop (SSW2023), Ausgabe 2023, 2024, Seite(n) 75-80
Herausgeber: ISCA
DOI: 10.21437/ssw.2023-12

Factors Affecting the Evaluation of Synthetic Speech in Context

Autoren: Johannah O'Mahony, Pilar Oplustil-Gallegos, Catherine Lai, Simon King
Veröffentlicht in: 11th ISCA Speech Synthesis Workshop (SSW 11), Ausgabe 2021, 2024, Seite(n) 148-153
Herausgeber: ISCA
DOI: 10.21437/ssw.2021-26

Data-augmented cross-lingual synthesis in a teacher-student framework

Autoren: Marcel de Korte, Jaebok Kim, Aki Kunikoshi, Adaeze Adigwe, Esther Klabbers
Veröffentlicht in: Proc. INTERSPEECH 2022, Ausgabe 2022, 2022
Herausgeber: ISCA

Combining conversational speech with read speech to improve prosody in Text-to-Speech synthesis

Autoren: Johannah O'Mahony, Catherine Lai, Simon King
Veröffentlicht in: Interspeech 2022, Ausgabe 2022, 2024, Seite(n) 3388-3392
Herausgeber: ISCA
DOI: 10.21437/interspeech.2022-10167

Knowing Where to Look: A Planning-based Architecture to Automate the Gaze Behavior of Social Robots

Autoren: Chinmaya Mishra, Gabriel Skantze
Veröffentlicht in: 2022 31st IEEE International Conference on Robot and Human Interactive Communication (RO-MAN), Ausgabe 29 August 2022 - 02 September 2022, 2022, Seite(n) 1201-1208, ISSN 1944-9437
Herausgeber: IEEE
DOI: 10.1109/ro-man53752.2022.9900740

Towards the Use of Social Robot Furhat and Generative AI in Testing Cognitive Abilities

Autoren: Róbert Sabo, Štefan Beňuš, Viktória Kevická, Marian Trnka, Milan Rusko, Sakhia Darjaa, Jay Kejriwal
Veröffentlicht in: Human Affairs, Ausgabe 34, 2024, Seite(n) 224-243, ISSN 1210-3055
Herausgeber: Slovak Academic Press Ltd
DOI: 10.1515/humaff-2023-0134

Real-time emotion generation in human-robot dialogue using large language models

Autoren: Chinmaya Mishra, Rinus Verdonschot, Peter Hagoort, Gabriel Skantze
Veröffentlicht in: Frontiers in Robotics and AI, Ausgabe 10, 2023, ISSN 2296-9144
Herausgeber: Frontiers
DOI: 10.3389/frobt.2023.1271610

Multi‐speaker experimental designs: Methodological considerations

Autoren: Tom Offrede; Christine Mooshammer; Susanne Fuchs
Veröffentlicht in: Language and Linguistics Compass, Ausgabe Monthly, 2021, Seite(n) 1-24, ISSN 1749-818X
Herausgeber: Blackwell
DOI: 10.1111/lnc3.12443

Brain signatures predict communicative function of speech production in interaction

Autoren: Boux, I., Tomasello, R., Grisoni, L. and Pulvermüller, F.
Veröffentlicht in: Cortex, 2021, ISSN 0010-9452
Herausgeber: Masson Publishing
DOI: 10.1016/j.cortex.2020.11.008

Prosodic entrainment in individuals with autism spectrum disorder

Autoren: Joanna Kruyt, Štefan Beňuš
Veröffentlicht in: Topics in Linguistics, Ausgabe volume 22, number 2, 2021, Seite(n) 47-61, ISSN 2199-6504
Herausgeber: Sciendo (De Gruyter Poland)
DOI: 10.2478/topling-2021-0010

Breathing and Speech Adaptation: Do Speakers Adapt Toward a Confederate Talking Under Physical Effort?

Autoren: Tom Offrede, Christine Mooshammer, Susanne Fuchs
Veröffentlicht in: Journal of Speech, Language, and Hearing Research, Ausgabe 2024, 2024, Seite(n) 1-17, ISSN 1092-4388
Herausgeber: American Speech-Language-Hearing Association
DOI: 10.1044/2023_jslhr-23-00113

Neologisms are epidemic: Modeling the life cycle of neologisms in China 2008-2016

Autoren: Menghan Jiang, Xiang Ying Shen, Kathleen Ahrens, Chu-Ren Huang
Veröffentlicht in: PLOS ONE, Ausgabe 16, 2021, Seite(n) e0245984, ISSN 1932-6203
Herausgeber: Public Library of Science
DOI: 10.1371/journal.pone.0245984

Listeners' convergence towards an artificial agent in a joint phoneme categorization task

Autoren: Noël Nguyen, Leonardo Lancia, Lena Huttner, Jean-Luc Schwartz, Julien Diard
Veröffentlicht in: Glossa Psycholinguistics, Ausgabe 3, 2024, ISSN 2767-0279
Herausgeber: Glossa Psycholinguistics
DOI: 10.5070/g6011165

The Conversational Discourse Unit: Identification and Its Role in Conversational Turn-taking Management

Autoren: Junfei Hu, Liesbeth Degand
Veröffentlicht in: Dialogue & Discourse, Ausgabe 14 (2), 2023, ISSN 2152-9620
Herausgeber: University of Illinois Libraries
DOI: 10.5210/dad.2023.203

Feedback quality and divided attention: exploring commentaries on alignment in task-oriented dialogue

Autoren: Ludivine Crible, Greta Gandolfi, Martin J. Pickering
Veröffentlicht in: Language and Cognition, Ausgabe 2024, 2024, Seite(n) 1-29, ISSN 1866-9808
Herausgeber: Cambridge University Press
DOI: 10.1017/langcog.2023.65

Measuring Prosodic Entrainment in Conversation: A Review and Comparison of Different Methods

Autoren: Joanna Kruyt, Dorina de Jong, Alessandro D'Ausilio, Štefan Beňuš
Veröffentlicht in: Journal of Speech, Language, and Hearing Research, Ausgabe 66, 2023, Seite(n) 4280-4314, ISSN 1092-4388
Herausgeber: American Speech-Language-Hearing Association
DOI: 10.1044/2023_jslhr-23-00094

Neurophysiological evidence for rapid processing of verbal and gestural information in understanding communicative actions

Autoren: Tomasello, R., Kim, C., Dreyer, F. R., Grisoni, L. and Pulvermüller, F.
Veröffentlicht in: Scientific Reports, 2019, ISSN 2045-2322
Herausgeber: Nature Publishing Group
DOI: 10.1038/s41598-019-52158-w

Ideography in interaction

Autoren: Greta Gandolfi, Martin J. Pickering
Veröffentlicht in: Behavioral and Brain Sciences, Ausgabe 46, 2023, Seite(n) e243, ISSN 0140-525X
Herausgeber: Cambridge University Press
DOI: 10.1017/s0140525x23000572

Does a robot’s gaze aversion affect human gaze aversion?

Autoren: Chinmaya Mishra, Tom Offrede, Susanne Fuchs, Christine Mooshammer, Gabriel Skantze
Veröffentlicht in: Frontiers in Robotics and AI, Ausgabe 10, 2023, ISSN 2296-9144
Herausgeber: Frontiers
DOI: 10.3389/frobt.2023.1127626

Mechanisms of alignment: shared control, social cognition and metacognition

Autoren: Greta Gandolfi, Martin J. Pickering, Simon Garrod
Veröffentlicht in: Philosophical Transactions of the Royal Society B: Biological Sciences, Ausgabe 378, 2024, Seite(n) 20210362, ISSN 0962-8436
Herausgeber: Royal Society of London
DOI: 10.1098/rstb.2021.0362

Instantaneous Neural Processing of Communicative Functions Conveyed by Speech Prosody

Autoren: Tomasello, R., Grisoni, L., Boux, I., Sammler, D. and Pulvermüller, F.
Veröffentlicht in: Cerebral Cortex, 2022, ISSN 1047-3211
Herausgeber: Oxford University Press
DOI: 10.1093/cercor/bhab522

Lexical Access in Speech Production

Autoren: Emilia Kerr, Bissera Ivanova, Kristof Strijkers
Veröffentlicht in: Language Production, Ausgabe 1st Edition, 2023, Seite(n) 32-65, ISSN 9781-003145790
Herausgeber: Routledge
DOI: 10.4324/9781003145790-3

Leistungen

Veröffentlichungen

Diese Seite teilen

Herunterladen