Talk

Invited talk at DaFWEBKON26

Andy Lücking and Alexander Mehler have been invited to give a talk at the Web Conference for German Teachers 2026. The topic of the speech is: “Language-accompanying gestures, AI and virtual reality – multimodal communication research at the intersection of linguistics and computer science”.

Andy Lücking and Alexander Mehler. 2026–01–28/2026–01–30. Sprachbegleitende Gesten, KI und Virtuelle Realität. Invited talk.
BibTeX
@misc{Luecking:Mehler:2026,
  author    = {Lücking, Andy and Mehler, Alexander},
  title     = {{Sprachbegleitende Gesten, KI und Virtuelle Realität}},
  subtitle  = {{Multimodale Kommunikationsforschung im Schnittfeld von Linguistik und Computerwissenschaft}},
  howpublished = {Invited talk at DaFWEBKON26, Webkonferenz für
                  Deutschlehrende},
  date      = {2026-01-28/2026-01-30},
  url       = {https://dafwebkon.com/events/sprachbegleitende-gesten/},
  keywords  = {talk, cosgrin-vr},
  note      = {Invited talk},
  abstract  = {Alltagskommunikation ist üblicherweise multimodal (d.h., nutzt
               mehr als einen Informationskanal). Gesprochene Sprache wird beispielsweise
               von manuellen Gesten begleitet. Diese Gesten wiederum können über
               die linguistische Bedeutung hinausgehende Information beitragen.
               Sie sind also semantisch interessant.<br><br>Der Vortrag skizziert
               eine räumliche Gestensemantik und führt in KI-gestützte Gestenklassifikation
               ein. Um multimodale Verhaltensdaten zu erfassen und auszuwerten,
               werden zunehmend Methoden der Virtuellen Realität (VR) eingesetzt.
               Das Frankfurter Va.Si.Li-Lab kombiniert KI und VR für Multimodalitätsforschung.
               Auf diese Weise lassen sich z.B. mutlimodal, avatarbasierte VR-Interaktionen
               untersuchen und mit Face-to-face-Interaktionen vergleichen. Der
               Vortrag stellt erste Ergebnisse vor.}
}

Presentation at the ICL 2024

Andy Lücking and Jonathan Ginzburg (Université Paris Cité) will present their work on multimodal clarification interaction at the 21st International Congress of Linguists (ICL). ICL is organized only once every five years and is the meeting place par excellence for international linguistics.

The presentation extends work on verbal repair and explores the potential for multimodal clarification by proposing constructions that enable formal descriptions.