COnversational BRAins

Unsupervised Auditory and Semantic Entrainment Models with Deep Neural Networks

Autoren: Jay Kejriwal, Štefan Beňuš, Lina M. Rojas-Barahona
Veröffentlicht in: INTERSPEECH 2023, Ausgabe 2023, 2024, Seite(n) 2628-2632
Herausgeber: ISCA
DOI: 10.21437/interspeech.2023-1929

Speech Adaptation and Physiological Responses: A Study on f0 and Skin Temperature

Autoren: Thomaz Offrede, Christine Mooshammer, Alessandro D'Ausilio, Susanne Fuchs
Veröffentlicht in: Speech Prosody, Ausgabe 2024, 2024
Herausgeber: Speech Prosody

Intonation Control for Neural Text-to-Speech Synthesis with Polynomial Models of F0

Autoren: Niamh Corkey, Johannah O'Mahony, Simon King
Veröffentlicht in: Proc. INTERSPEECH 2023, Ausgabe 2023, 2023, Seite(n) 2014-2015
Herausgeber: ISCA

Relationship between auditory and semantic entrainment using Deep Neural Networks (DNN)

Autoren: Jay Kejriwal, Štefan Beňuš
Veröffentlicht in: INTERSPEECH 2023, Ausgabe 2023, 2024, Seite(n) 2623-2627
Herausgeber: ISCA
DOI: 10.21437/interspeech.2023-1947

Speech Entrainment and Emotion

Autoren: Jay Kejriwal, Štefan Beňuš
Veröffentlicht in: 2023 14th IEEE International Conference on Cognitive Infocommunications (CogInfoCom), Ausgabe 2023, 2024, Seite(n) 99-104
Herausgeber: IEEE
DOI: 10.1109/coginfocom59411.2023.10397502

Investigating the Perception Production Link through Perceptual Adaptation and Phonetic Convergence.

Autoren: Lena-Marie Huttner, Noel Nguyen, Martin J. Pickering
Veröffentlicht in: Proc INTERSPEECH 2023, Ausgabe 2023, 2023, Seite(n) 3103-3107
Herausgeber: ISCA

A Hierarchical Predictive Processing Approach to Modelling Prosody

Autoren: Juraj Šimko, Adaeze Adigwe, Antti Suni, Martti Vainio
Veröffentlicht in: Speech Prosody 2022, Ausgabe 2022, 2024
Herausgeber: ISCA
DOI: 10.21437/speechprosody.2022-86

Investigating the relationship between prosodic entrainment and interaction style

Autoren: Joanna Kruyt, Lena-Marie Huttner, Johannah O'Mahony
Veröffentlicht in: Proceedings of the 20th International Congress of Phonetic Sciences, Ausgabe 2023, 2023, Seite(n) 3492-3496, ISBN 978-80-908114-2-3
Herausgeber: GUARANT International spol. s r.o.

Hierarchical Intonation Modelling for Speech Synthesis using Legendre Polynomial Coefficients

Autoren: Johannah O'Mahony, Niamh Corkey, Catherine Lai, Esther Klabbers, Simon King
Veröffentlicht in: Speech Prosody 2024, Ausgabe 2024, 2024
Herausgeber: ISCA
DOI: 10.21437/speechprosody.2024-208

Lexical entrainment on target words during task-oriented interaction in children with and without autism spectrum disorder

Autoren: Kruyt, J., Polónyiová, K., Ostatníková, D., Beňuš, Š.
Veröffentlicht in: Proceedings of the 27th Workshop on the Semantics and Pragmatics of Dialogue, Ausgabe August 2023, 2023, Seite(n) 6-14
Herausgeber: Proceedings of the 27th Workshop on the Semantics and Pragmatics of Dialogue

Language Proficiency and F0 Entrainment: A Study of L2 English Imitation in Italian, French, and Slovak Speakers

Autoren: Zheng Yuan, Štefan Beňuš, Alessandro D'Ausilio
Veröffentlicht in: Speech Prosody, 2024
Herausgeber: International Speech Communication Association

What does BERT learn about prosody?

Autoren: Kakouros, Sofoklis; O'Mahony, Johannah
Veröffentlicht in: in R Skarnitzl & J Volín (eds) , Proceedings of the 20th International Congress of Phonetic Sciences (ICPhS), Ausgabe 19, 2023, Seite(n) 1454-1458, ISBN 978-80-908114-2-4
Herausgeber: GUARANT International spol. s r.o.
DOI: 10.48550/arxiv.2304.12706

Do Humans Converge Phonetically When Talking to a Robot?

Autoren: Thomaz Offrede, Chinmaya Mishra, Gabriel Skantze, Susanne Fuchs, Christine Mooshammer
Veröffentlicht in: International Congress of Phonetic Sciences (ICPhS), Ausgabe 2023, 2023, Seite(n) 3507--3511, ISBN 978-80-908114-2-3
Herausgeber: GUARANT International spol. s r.o.

Prosodic and lexical entrainment in adults with and without schizophrenia

Autoren: Joanna Kruyt, Štefan Beňuš, Catherine Faget, Christophe Lançon, Maud Champagne-Lavau
Veröffentlicht in: Speech Prosody 2022, 2024, Seite(n) 125-129
Herausgeber: ISCA
DOI: 10.21437/speechprosody.2022-26

The ART of Conversation: Measuring Phonetic Convergence and Deliberate Imitation in L2-Speech with a Siamese RNN

Autoren: Zheng Yuan, Aldo Pastore, Dorina de Jong, Hao Xu, Luciano Fadiga, Alessandro D'Ausilio
Veröffentlicht in: INTERSPEECH 2023, Ausgabe August 2023, 2024, Seite(n) 132--136
Herausgeber: ISCA
DOI: 10.21437/interspeech.2023-2283

Annotation of Communicative Functions of Short Feedback Tokens in Switchboard

Autoren: Figueroa, Carol; Adigwe, Adaeze; Ochs, Magalie; Skantze, Gabriel
Veröffentlicht in: Proceedings of the 13th Conference on Language Resources and Evaluation, Jun 2022, Marseille, France, Ausgabe 10, 2022, Seite(n) 1849–1859
Herausgeber: Proceedings of the 13th Conference on Language Resources and Envaluation (LREC 2022)

Strategies for developing a Conversational Speech Dataset for Text-To-Speech Synthesis

Autoren: Adaeze O. Adigwe, Esther Klabbers
Veröffentlicht in: Interspeech 2022, Ausgabe 2022, 2024
Herausgeber: ISCA
DOI: 10.21437/interspeech.2022-10802

Synthesis after a couple PINTs: Investigating the Role of Pause-Internal Phonetic Particles in Speech Synthesis and Perception

Autoren: Mikey Elmers, Johannah O'Mahony, Éva Székely
Veröffentlicht in: INTERSPEECH 2023, Ausgabe 2023, 2024, Seite(n) 4843-4847
Herausgeber: ISCA
DOI: 10.21437/interspeech.2023-2178

Stress detection using non-semantic speech representation

Autoren: Jay Kejriwal, Stefan Benus, Marian Trnka
Veröffentlicht in: 2022 32nd International Conference Radioelektronika (RADIOELEKTRONIKA), Ausgabe 2022, 2022, Seite(n) 1-5
Herausgeber: IEEE
DOI: 10.1109/radioelektronika54537.2022.9764916

The effects of prediction in conversational alignment

Autoren: Kerr, E., Strijkers, K.
Veröffentlicht in: Proceedings of the 44th Annual Conference of the Cognitive Science Society, Ausgabe Volume 44, 2022
Herausgeber: Proceedings of the Annual Meeting of the Cognitive Science Society

Comparing acoustic and textual representations of previous linguistic context for improving Text-to-Speech

Autoren: Pilar Oplustil-Gallegos, Johannah O'Mahony, Simon King
Veröffentlicht in: 11th ISCA Speech Synthesis Workshop (SSW 11), Ausgabe 2021, 2024, Seite(n) 205-210
Herausgeber: ISCA
DOI: 10.21437/ssw.2021-36

Relationship between speech entrainment and emotion

Autoren: Jay Kejriwal
Veröffentlicht in: 2022 10th International Conference on Affective Computing and Intelligent Interaction Workshops and Demos (ACIIW), Ausgabe 2022, 2024, Seite(n) 1-4
Herausgeber: IEEE
DOI: 10.1109/aciiw57231.2022.10086027

An analysis on the effects of speaker embedding choice in non auto-regressive TTS

Autoren: Adriana Stan, Johannah O'Mahony
Veröffentlicht in: 12th ISCA Speech Synthesis Workshop (SSW2023), Ausgabe 2023, 2024, Seite(n) 134-138
Herausgeber: ISCA
DOI: 10.21437/ssw.2023-21

The role of production in perceptual learning

Autoren: Lena-Marie Huttner, Noel Nguyen, Martin J. Pickering
Veröffentlicht in: Proceedings of the 20th International Congress of Phonetic Sciences, Ausgabe 2023, 2023, Seite(n) 496-500
Herausgeber: GUARANT International spol. s r.o.

Prosodic Alignment in Different Conversational Feedback Functions

Autoren: Figueroa, Carol; Beňuš, Štefan; Skantze, Gabriel
Veröffentlicht in: 20th International Congress of Phonetic Sciences (ICPhS), Aug 2023, Prague, Czech Republic, Ausgabe 1, 2023
Herausgeber: 20th International Congress of Phonetic Sciences (ICPHS)

ART: The Alternating Reading Task Corpus for Speech Entrainment and Imitation

Autoren: Zheng Yuan, Dorina de Jong, Ruitao Feng, Štefan Beňuš, Noël Nguyen, Róbert Sabo, Luciano Fadiga, Alessandro D’Ausilio
Veröffentlicht in: Proceedings of the 2024 Joint International Conference on Computational Linguistics, Language Resources and Evaluation (LREC-COLING 2024), Ausgabe May 2024, 2024, Seite(n) 1548–1562
Herausgeber: ELRA and ICCL

Breathing features and their impact on speech perception of COVID-19 patients

Autoren: Xiaoming Jiang, Lixin Yu, Leinuo Dai, Jinyang Chen, Zheng Yuan
Veröffentlicht in: Speech Prosody, 2024
Herausgeber: International Speech Communication Association

The effect of (non-)native language and task complexity on speech entrainment

Autoren: Mareková, L., Kruyt, J., Beňuš, Š.
Veröffentlicht in: International Congress of Phonetic Sciences (ICPhS), 2022, Seite(n) 1548-1552
Herausgeber: GUARANT International spol. s r.o.

The ADAIO System at the BEA-2023 Shared Task: Shared Task Generating AI Teacher Responses in Educational Dialogues

Autoren: Adaeze Adigwe, Zheng Yuan
Veröffentlicht in: Proceedings of the 18th Workshop on Innovative Use of NLP for Building Educational Applications (BEA 2023), Ausgabe July 2023, 2023, Seite(n) 796–804
Herausgeber: Association for Computational Linguistics
DOI: 10.18653/v1/2023.bea-1.65

Classification of Feedback Functions in Spoken Dialog Using Large Language Models and Prosodic Features

Autoren: Carol Figueroa, Magalie Ochs, Gabriel Skantze
Veröffentlicht in: Proceedings of the 27th Workshop on the Semantics and Pragmatics of Dialogue, Ausgabe August, 16–17, 2023, 2023
Herausgeber: Proceedings of the 27th Workshop on the Semantics and Pragmatics of Dialogue

Synthesising turn-taking cues using natural conversational data

Autoren: Johannah O'Mahony, Catherine Lai, Simon King
Veröffentlicht in: 12th ISCA Speech Synthesis Workshop (SSW2023), Ausgabe 2023, 2024, Seite(n) 75-80
Herausgeber: ISCA
DOI: 10.21437/ssw.2023-12

The Badalona Corpus An Audio, Video and Neuro-Physiological Conversational Dataset.

Autoren: Blache P., Antoine S., de Jong D., Huttner L.-M., Kerr E., et al.
Veröffentlicht in: Proceedings of the Thirteenth Language Resources and Evaluation Conference, 2022, Seite(n) 5170–5177
Herausgeber: European Language Resources Association

The Slovak Autistic and Non-Autistic Child Speech Corpus: Task-Oriented Child-Adult Interactions

Autoren: Kruyt, J., Polónyiová, K.,Sabo, R., Ostatníková, D., Beňuš, Š.
Veröffentlicht in: Proc LREC-COLING 2024, 2024, Seite(n) 16094–16099
Herausgeber: ELRA Language Resource Association

Factors Affecting the Evaluation of Synthetic Speech in Context

Autoren: Johannah O'Mahony, Pilar Oplustil-Gallegos, Catherine Lai, Simon King
Veröffentlicht in: 11th ISCA Speech Synthesis Workshop (SSW 11), Ausgabe 2021, 2024, Seite(n) 148-153
Herausgeber: ISCA
DOI: 10.21437/ssw.2021-26

Data-augmented cross-lingual synthesis in a teacher-student framework

Autoren: Marcel de Korte, Jaebok Kim, Aki Kunikoshi, Adaeze Adigwe, Esther Klabbers
Veröffentlicht in: Proc. INTERSPEECH 2022, Ausgabe 2022, 2022
Herausgeber: ISCA

Combining conversational speech with read speech to improve prosody in Text-to-Speech synthesis

Autoren: Johannah O'Mahony, Catherine Lai, Simon King
Veröffentlicht in: Interspeech 2022, Ausgabe 2022, 2024, Seite(n) 3388-3392
Herausgeber: ISCA
DOI: 10.21437/interspeech.2022-10167

Global and local prosodic entrainment in a task-oriented interaction in autistic and neurotypical children

Autoren: Kruyt, J., Polónyiová, K., Ostatníková, D., Beňuš, Š.
Veröffentlicht in: Proceedings of the First Workshop on Connecting Multiple Disciplines to AI Techniques in Interaction-centric Autism Research and Diagnosis (ICARD 2023), 2022, Seite(n) 1-11
Herausgeber: Association for Computational Linguistics

Knowing Where to Look: A Planning-based Architecture to Automate the Gaze Behavior of Social Robots

Autoren: Chinmaya Mishra, Gabriel Skantze
Veröffentlicht in: 2022 31st IEEE International Conference on Robot and Human Interactive Communication (RO-MAN), Ausgabe 29 August 2022 - 02 September 2022, 2022, Seite(n) 1201-1208, ISSN 1944-9437
Herausgeber: IEEE
DOI: 10.1109/ro-man53752.2022.9900740

Speech imitation skills predict automatic phonetic convergence: a GMM-UBM study on L2

Autoren: Dorina de Jong, Aldo Pastore, Noël Nguyen, Alessandro D'Ausilio
Veröffentlicht in: Interspeech 2022, 2024
Herausgeber: ISCA
DOI: 10.21437/interspeech.2022-10684

Real-time emotion generation in human-robot dialogue using large language models

Autoren: Chinmaya Mishra, Rinus Verdonschot, Peter Hagoort, Gabriel Skantze
Veröffentlicht in: Frontiers in Robotics and AI, Ausgabe 10, 2023, ISSN 2296-9144
Herausgeber: Frontiers
DOI: 10.3389/frobt.2023.1271610

Multi‐speaker experimental designs: Methodological considerations

Autoren: Tom Offrede; Christine Mooshammer; Susanne Fuchs
Veröffentlicht in: Language and Linguistics Compass, Ausgabe Monthly, 2021, Seite(n) 1-24, ISSN 1749-818X
Herausgeber: Blackwell
DOI: 10.1111/lnc3.12443

Brain signatures predict communicative function of speech production in interaction

Autoren: Boux, I., Tomasello, R., Grisoni, L. and Pulvermüller, F.
Veröffentlicht in: Cortex, 2021, ISSN 0010-9452
Herausgeber: Masson Publishing
DOI: 10.1016/j.cortex.2020.11.008

Prosodic entrainment in individuals with autism spectrum disorder

Autoren: Joanna Kruyt, Štefan Beňuš
Veröffentlicht in: Topics in Linguistics, Ausgabe volume 22, number 2, 2021, Seite(n) 47-61, ISSN 2199-6504
Herausgeber: Sciendo (De Gruyter Poland)
DOI: 10.2478/topling-2021-0010

Breathing and Speech Adaptation: Do Speakers Adapt Toward a Confederate Talking Under Physical Effort?

Autoren: Tom Offrede, Christine Mooshammer, Susanne Fuchs
Veröffentlicht in: Journal of Speech, Language, and Hearing Research, Ausgabe 2024, 2024, Seite(n) 1-17, ISSN 1092-4388
Herausgeber: American Speech-Language-Hearing Association
DOI: 10.1044/2023_jslhr-23-00113

Neologisms are epidemic: Modeling the life cycle of neologisms in China 2008-2016

Autoren: Menghan Jiang, Xiang Ying Shen, Kathleen Ahrens, Chu-Ren Huang
Veröffentlicht in: PLOS ONE, Ausgabe 16, 2021, Seite(n) e0245984, ISSN 1932-6203
Herausgeber: Public Library of Science
DOI: 10.1371/journal.pone.0245984

Listeners' convergence towards an artificial agent in a joint phoneme categorization task

Autoren: Noël Nguyen, Leonardo Lancia, Lena Huttner, Jean-Luc Schwartz, Julien Diard
Veröffentlicht in: Glossa Psycholinguistics, Ausgabe 3, 2024, ISSN 2767-0279
Herausgeber: Glossa Psycholinguistics
DOI: 10.5070/g6011165

The Conversational Discourse Unit: Identification and Its Role in Conversational Turn-taking Management

Autoren: Junfei Hu, Liesbeth Degand
Veröffentlicht in: Dialogue & Discourse, Ausgabe 14 (2), 2023, ISSN 2152-9620
Herausgeber: University of Illinois Libraries
DOI: 10.5210/dad.2023.203

Feedback quality and divided attention: exploring commentaries on alignment in task-oriented dialogue

Autoren: Ludivine Crible, Greta Gandolfi, Martin J. Pickering
Veröffentlicht in: Language and Cognition, Ausgabe 2024, 2024, Seite(n) 1-29, ISSN 1866-9808
Herausgeber: Cambridge University Press
DOI: 10.1017/langcog.2023.65

Measuring Prosodic Entrainment in Conversation: A Review and Comparison of Different Methods

Autoren: Joanna Kruyt, Dorina de Jong, Alessandro D'Ausilio, Štefan Beňuš
Veröffentlicht in: Journal of Speech, Language, and Hearing Research, Ausgabe 66, 2023, Seite(n) 4280-4314, ISSN 1092-4388
Herausgeber: American Speech-Language-Hearing Association
DOI: 10.1044/2023_jslhr-23-00094

Neurophysiological evidence for rapid processing of verbal and gestural information in understanding communicative actions

Autoren: Tomasello, R., Kim, C., Dreyer, F. R., Grisoni, L. and Pulvermüller, F.
Veröffentlicht in: Scientific Reports, 2019, ISSN 2045-2322
Herausgeber: Nature Publishing Group
DOI: 10.1038/s41598-019-52158-w

Ideography in interaction

Autoren: Greta Gandolfi, Martin J. Pickering
Veröffentlicht in: Behavioral and Brain Sciences, Ausgabe 46, 2023, Seite(n) e243, ISSN 0140-525X
Herausgeber: Cambridge University Press
DOI: 10.1017/s0140525x23000572

Does a robot’s gaze aversion affect human gaze aversion?

Autoren: Chinmaya Mishra, Tom Offrede, Susanne Fuchs, Christine Mooshammer, Gabriel Skantze
Veröffentlicht in: Frontiers in Robotics and AI, Ausgabe 10, 2023, ISSN 2296-9144
Herausgeber: Frontiers
DOI: 10.3389/frobt.2023.1127626

Mechanisms of alignment: shared control, social cognition and metacognition

Autoren: Greta Gandolfi, Martin J. Pickering, Simon Garrod
Veröffentlicht in: Philosophical Transactions of the Royal Society B: Biological Sciences, Ausgabe 378, 2024, Seite(n) 20210362, ISSN 0962-8436
Herausgeber: Royal Society of London
DOI: 10.1098/rstb.2021.0362

Instantaneous Neural Processing of Communicative Functions Conveyed by Speech Prosody

Autoren: Tomasello, R., Grisoni, L., Boux, I., Sammler, D. and Pulvermüller, F.
Veröffentlicht in: Cerebral Cortex, 2022, ISSN 1047-3211
Herausgeber: Oxford University Press
DOI: 10.1093/cercor/bhab522

Predicting meaning in the dyad.

Autoren: Emilia Kerr, Benjamin Morillon, Kristof Strijkers
Veröffentlicht in: Center for Open Science, 2024
Herausgeber: Center for Open Science
DOI: 10.31234/osf.io/8cf2m

Lexical Access in Speech Production

Autoren: Emilia Kerr, Bissera Ivanova, Kristof Strijkers
Veröffentlicht in: Language Production, Ausgabe 1st Edition, 2023, Seite(n) 32-65, ISSN 9781-003145790
Herausgeber: Routledge
DOI: 10.4324/9781003145790-3

Leistungen

Veröffentlichungen

Diese Seite teilen Diese Seite in sozialen Netzwerken teilen

Herunterladen Den Inhalt der Seite herunterladen