Motion-Emotion-Lab

Psychophysiologisches Labor für Bewegungs- und Emotionsstudien in den Bereichen Musikphysiologie, Musikermedizin & Systematische Musikwissenschaft

Das Musizieren erfordert hochkomplexe feinmotorische Bewegungsformen und kognitive Leistungen. Moderne Hard- und Softwaresysteme ermöglichen es der Forschung im Bereich „Music Performance Science“, die Prozesse des Musizierens und Musikhörens professionell zu untersuchen. Sie bilden einen wissenschaftlichen Ausgangspunkt, um Aktivitäten und emotionale Prozesse zu dokumentieren. Darüber hinaus bieten diese Systeme Grundlagen, um Optimierungen zu erarbeiten und präventiv Überlastungsbeschwerden sowie Aufführungsängsten vorzubeugen. Das Motion-Emotion-Lab, geleitet von Ao. Univ.-Prof. Mag. Dr. Matthias Bertsch, besteht aus vielen Einzelkomponenten zur Messung unterschiedlicher Daten.

 

Projekte

 

 

Infrastruktur

EMG (Elektromyographie) Systeme

Messung der elektrischen Muskelaktivität. Mittels Oberflächen-Elektromyographie können Muskelaktivierungen visualisiert und erhöhte Verspannungen detektiert werden.

Motion Capturing

3D Motion Capture: Bewegungssensoren am Körper zur Haltungs- und Bewegungsanalyse

  • NORAXON Myo Motion Research 6 Sensoren 100Hz Abtastrate mit 3D-Modellierung und biomechanischer Analysesoftware
  • CROM 3 (Cervical Range of Motion) Goniometer

Druckmessungen

Kraftmessplatten dienen der Dokumentation der Körperhaltung im Stand. Mit Hilfe spezieller Sensoren können auch die beim Spielen am Instrument auftretenden Kräfte gemessen werden.

  • ZEBRIS Druckmessplatte Typ FDM-S PRESSURE PLATFORM zur Stand- und Abrollanalyse
  • NORAXON MyoResearch 3 (MR3) PDF myoPressure Software-Modul
  • NORAXON Sensoren: DTS Flexiforce Lokaler 1 Drucksensor 25lb
  • BONSAI Systems (ETH Zürch) LiPr Mundstück-Andruck-Sensor

Psychophysiologische Biosensoren

Biosensoren: Messungen von Hautleitwert, Puls, Hauttemperatur oder Atemmuster zeigen biopsychologische Wirkmechanismen auf und liefern zusätzliche Informationen über die Musikwahrnehmung und das emotionale Erleben während des Spiels.

  • NORAXON Biomechanische Analyse Software, DTS Bio Monitor Puls, Atmung, Temperatur
  • Schuhfried Biofeedback 2000 x-pert Bluetooth inkl. Sprach-/Videorecorder, Statistikmodul
  • 2x Schuhfried BFB Multisensor (Funkmodule SCL, SCR, TEMP, PULS, RESP)
  • Schuhfried BFB RESP Atmungsgürtelkombination Brust- und Abdomensensor
  • Schuhfried BFB HFV/HRV Modul
  • BOSO medistar Blutdruckmessgerät
  • Vier Empatica EmbracePlus (Ventral EDA sensor (Electrodermal activity); Accelerometer; Photoplethysmogram; IBI (Inter-beat interval); On-skin detection; PR (Pulse rate); PRV (Pulse rate variability); Rest; Skin temperature; Steps and activity)
  • Mindfield eSense Skin Response : Hautleitwertmessung mit Smartphone App

Atemsensoren

Spirometrie: Dokumentation der Atem- und Lungenkapazitäten

  • COSMED - Pony FX MIP/MEP Advanced Desktop Spirometer

Audio / Video Equippment

Audiovisuelle Information, d.h. Ton- und Videoaufnahmen, liefern wichtige Grundlagen zur Dokumentation des Musizierens. Zudem ermöglichen spezielle

  • NTI XL2 Audio SPL Schallpegelmesser
  • FLIR ONE iPhone-Wärmebildkamera - IR Thermocam
  • USB Audio Interfaces, diverse Mikrophone
  • NORAXON Synchronisationsmodule Myo Sync und Sync Light

 

SInES Tools © 2019–2025 by Christoph Reuter and SInES

 

Virtual Reality & Augmented Audio

Hardware & Software für die Erstellung von virtuellen Umgebungen zum VR Exposure Training.

 

  • Ricoh Theta Z1 360° Kamera
  • Insta360 Pro 2 Virtual Reality Kamera (6 x 6K Kameras) Stitched 8K Videos
  • Rode NT-SF1 Ambient Sound Mikro
  • Zoom FN8 Mobiler 8-Kanal Audio Recorder
  • Meta Quest 1 VR Headset von Meta (ehemals Oculus und Facebook)
  • Meta Quest 2 VR Headset von Meta (ehemals Oculus und Facebook) Leihgabe Bertsch
  • Meta Quest 3 VR Headset von Meta (ehemals Oculus und Facebook)
  • Meta Quest Pro VR Headset von Meta (ehemals Oculus und Facebook)
  • PICO 4 All-in-One VR Headset 128GB von ByteDance (TikTok) ÖGfMM Leihgabe

Stimmanalysen

Neben Audioaufnahmen bieten spezielle Hard- und Softwarepakete sängerspezifische Informationen.

  • VOCE VidiVoice Biofeedback Professional
  • VOCE VidiVoice Stimmfeld Professional (Stimmfeldmessungen)
  • 2x PCE-322 A SPL Schallpegelmesser dB(A), dB(C) mit Datenlogger
  • VOLTCRAFT DL-161S Schallpegelmesser dB(A)

 

 

The Motion Emotion Lab is an official friend & partner of the
SINES Tools for Data Acquisition and Empirical Research in Systematic Musicology at the University of Vienna.
Local Mirror of : SInES Tools © 2019–2025 by Christoph Reuter and SInES

 

 

Tools for Data Acquisition and Empirical Research

🎭 Emotion & Expression Analysis

  • Emotion Analysis (Firefox only) – Emotion Tracking mit Mindfield eSense SCR-Messung und Audioanalyse

  • Expression Analysis – Gesichtsausdrucks- und Mimik-Tracking (Video + Audio)

  • Heartbeat Tracker – Puls und Stimmung via Webcam messen

  • Eye Tracker – Heatmaps und Blickpfade aus Augenbewegungen generieren

  • Helpers & Visualizers – Datenvisualisierungen für SInES-Messungen

🕺 Pose & Motion Tracking

  • 2D Pose Tracking (MoveNet) – Frame-by-Frame 2D-Tracking einer Person

  • 2D/3D Pose Tracking (BlazePose) – Frame-by-Frame 2D/3D-Tracking einer Person

  • 2D/3D Pose Tracking (Chrome only) – Video-Pose-Tracking mit Audioanalyse

  • 2D/3D Hand Tracking (Chrome only) – Handtracking (zwei Hände) mit Audioanalyse

  • Point Tracker – Tracking ausgewählter Punkte in Videos (jsFeat-basiert)

🎶 Signal & Audio Analysis

  • Signal Analysis Tool I – Audioanalyse mit Meyda

  • Signal Analysis Tool II – Audioanalyse mit js-xtract

  • Spectral Features – Spektralanalyse mit Essentia.js

  • Frequency Bands – Spektralbänderanalyse mit Essentia.js

  • Formant Estimator – Formantenerkennung mit Formantanalyzer.js

🤘 Music & Voice Analysis

  • Extreme Metal Vocals Analyzer – Analyse von Metal-Gesang

  • Genre Estimator – Genreklassifikation mit Essentia/MusiCNN

  • Mood Estimator – Stimmungserkennung mit Essentia/MusiCNN

  • Valence Arousal Estimator – Valenz-Arousal-Schätzung mit Essentia/MusiCNN

  • Speech Emotion Estimator – Sprecheremotionen erkennen (WebSpeechAnalyser)

  • AI Pitch Estimator – Tonhöhenschätzung mit ML5

  • Pitch, Chroma & Beat – Tonhöhe, Klangfarbe und Beat-Analyse (Essentia.js)

  • Pitch & Onset Tool – Onset- und Pitch-Analyse mit Aubio.js

  • MIDI Analyser – Analyse von MIDI-Dateien

  • Tempo Tapper (BPM) – Tempo durch Tippen ermitteln

🔊 Sound Design & Psychoakustik

  • Spectral Resynthesizer – Rekonstruktion von Klängen aus Partialtönen

  • Squeeze and Stretch Partials – Konsonanz/Dissonanz durch Partialmanipulation

  • Masking Score Estimator – Maskierungs- und Klangmischungs-Bewertung

  • Audio File Analyser – Klanganalyse mit hörbarer Darstellung

  • Harmonic Tension Analyser – Analyse harmonischer Spannung in Musikstücken

🎻 Instrumental Tools (Firefox only)

  • Violin Intonation Programme (VIP) – Intonations-, Stimmungs- und Timbre-Analyse für Violine

  • Viola Intonation Programme (VIP) – dito für Viola

  • Violoncello Intonation Programme (VIP) – dito für Cello

🖼️ Image & Visual Data Tools

  • Image Batch Analyser – Bildersammlungen automatisch analysieren

  • Perceptual Color Comparator – Farbähnlichkeit nach menschlicher Wahrnehmung berechnen

🧠 Neurophysiologische Tools

  • Muse 2 EEG 4 Channel Datalogger (Chrome only) – EEG-Aufzeichnung (4 Kanäle) für Muse S-Headband inkl. Brain-Synthesizer/Sampler

🎨 Timbre & Special Experiments

  • (Dynamic) Timbre Maps – Formantenbewegung von Orchesterinstrumenten visualisieren

  • Will this Mosquito Bite me? (Firefox only) – Aus dem Moskitobru mmen vorhersagen, ob es beißt 😄

📚 Zitationshinweise

Reuter, C., Czedik-Eysenberg, I., Cui, A.-X. (2023, 2025) – DAGA und DAS|DAGA Beiträge, siehe:

Reuter et al. (2023, 2025). Science shines with SInES – Tools for audio and video analysis. Proceedings of DAGA/DAS|DAGA.

Motion-Emotion-Lab Logo