2022 - 2023MuMoCorp - Data Reuse von multimodalen und multisensoriellen Corpora im Rahmen des Dilthey Fellowship „Interaktion & Raum. Von der Konversationsanalyse zu dynamischen Interaktionsmodellen für die Mensch-Roboter-Interaktion“

Im Rahmen des von der Volkswagenstiftung geförderten Dilthey-Projekts „Interaktion & Raum. Von der Konversationsanalyse zu dynamischen Interaktionsmodellen für die Mensch-Roboter-Interaktion“ wurden umfangreiche Studien zur Mensch-Roboter-Interaktion im Szenario eines Museums-Guide durchgeführt (u.a. Pitsch et al. 2014, 2016, Gehle et al. 2017, Pitsch 2016, 2020). Am Projektende liegt nun ein reichhaltiges und in Bezug auf den Untersuchungsgegenstand ‚Mensch-Roboter-Interaktion‘ und die Multidimensionalität der Interaktion neuartiges Datenmaterial vor. Das Corpus umfasst mehrperspektivische Videodaten, xml-basierte Transkriptionen (Verbalität, Körperlichkeit) und zeitreihenbasierte Daten wie Roboter Logfiles, Motion Capture Daten etc. Ziel des Projekts zum Data Reuse ist die Aufbereitung des vorhandenen Interaktions-Korpus zur langfristigen Weiternutzung und dessen Speicherung als Open Data im Rahmen eines institutionellen Repositoriums.

Neben typischer Corpus-Aufbereitung von verbalsprachlichen Daten werden angesichts der neuartigen Datentypen auch Verfahren und Tools insbesondere für den Umgang mit multimodalen und multisensoriellen Corpus-Daten (MuMoCorp) entwickelt.

Gefördert durch:

Dilthey Fellowship der Volkswagenstiftung

VolkswagenStiftung_logo_png

Publikationen

  • Ferger, A, Krause, A. F. & Pitsch, K. (2023). „A Continous Integration (CI) Workflow for Quality Assurance Checks for Corpora of Multimodal Interaction". In: CLARIN Annual Conference Proceedings, 2023. ISSN 2773-2177 (online). Eds. Krister Lindén, Jyrki Niemi, and Thalassia Kontino. Leuven, Belgium, 2023.
  • Ferger, A, Krause, A. F. & Pitsch, K. (2023). „Workflows and Methods for Creating Structured Corpora of Multimodal Human-Robot-Interaction". In: Proceedings of the 10th International Conference on CMC and Social Media Corpora for the Humanities September 2023.Eds: Louis Cotgrove, Laura Herzberg, Harald Lüngen, Ines Pisetta. Mannheim, 2023.
    [DOI]
  • Krause, A. F., Ferger, A. & Pitsch, K. (2023). „Anonymization of Persons in Videos of Authentic Social Interaction. Model Selection and Parameter Optimization". In: Proceedings of the 10th International Conference on CMC and Social Media Corpora for the Humanities September 2023. Eds: Louis Cotgrove, Laura Herzberg, Harald Lüngen, Ines Pisetta. Mannheim, 2023.
    [DOI]
  • Krause, A. F., Ferger, A. & Pitsch, K. (2023). „Automatic Anonymization of Human Faces in Images of Authentic Social Interaction: A web application", In: CLARIN Annual Conference Proceedings, 2023. ISSN 2773-2177 (online). Eds. Krister Lindén, Jyrki Niemi, and Thalassia Kontino. Leuven, Belgium, 2023.

Vorträge

  • Krause, A. F., Ferger, A., Pitsch, K. (2023). Detecting and tracking persons in video recordingsof authentic social interaction: Analysis and anonymization. Vortrag auf dem Workshop CAMVA 2023.
    [Zum Workshop]
  • 06/2023: MuMoCorp. Data Reuse von multimodalen und multisensoriellen Interaktionskorpora. Projektvorstellung bei Text+ Workshop
    [Zum Workshop]
  • 02/2023: Ferger, A., Krause, A. F., Pitsch, K.: Multimodale und multisensorielle Korpora der Interaktionsforschung. FDM-Lösungen im DataReuse Projekt MuMoCorp. Präsentation beim Runden Tisch: Forschungsdatenmanagement in den Geisteswissenschaften.
  • 11/2022: Pitsch, K., Ferger, A., Krause, A. F.: Multimodale und multisensorielle Korpora der Interaktionsforschung: FDM-Lösungen im DataReuse Projekt MuMoCorp. Präsentation beim Tag des Forschungsdaten in NRW.
  • 09/2022: Ferger, A.: GitLab und Transkripte im Projekt MuMoCorp. Forschungsdatenmanagement mit git/Gitlab für Multimodale Korpora. Workshop für Forschungsdatenmanagement von fdm.nrw.
  • [Slides]

Team des Projekts

Team der Professur

  • Prof. Dr. Karola Pitsch
  • Dr. André Krause
  • Anne Ferger, M.A.

In Kooperation mit:

  • Prof. Dr. Andreas Witt (IDS Mannheim, Text+)
  • Dr. Henrike Helmer (IDS Mannheim)
  • Dr. Silke Reineke (IDS Mannheim)
  • Elena Frick, M.A. (IDS Mannheim)
  • Dr. Thomas Schmidt