Open Access

Holger Struchholz

• Ziel des Projektes ist die Entwicklung einer virtuellen Umgebung, die das charakteristische Klangabstrahlverhalten eines Musikinstruments in Echtzeit erfahrbar macht. Es wird eine virtuelle Umgebung geschaffen, in der sich der Benutzer frei um ein Musikinstrument bewegen kann und in Echtzeit ein akustisches und visuelles Feedback erhält. Durch die Verbindung der auditiven und visuellen Elemente und die Möglichkeit der Interaktion, wird das Erleben und die Wahrnehmung der Effekte intensiviert. Die Simulation des charakteristischen Klangabstrahlverhaltens erfolgt nicht durch eine rechenaufwändige Klangsynthese wie z.B. Physical Modeling, sondern basiert auf der Lautstärkeinterpolation einer Mehrkanalaufnahme. Die Verwendung der realen Aufnahmen ermöglicht eine annähernd naturgetreue Abbildung des Klangabstrahlverhaltens und ist, im Gegensatz zu rechenaufwändigen Klangsyntheseverfahren, echtzeitfähig. Zusätzlich wurde ein einfacher Filter entwickelt, der das charakteristischeZiel des Projektes ist die Entwicklung einer virtuellen Umgebung, die das charakteristische Klangabstrahlverhalten eines Musikinstruments in Echtzeit erfahrbar macht. Es wird eine virtuelle Umgebung geschaffen, in der sich der Benutzer frei um ein Musikinstrument bewegen kann und in Echtzeit ein akustisches und visuelles Feedback erhält. Durch die Verbindung der auditiven und visuellen Elemente und die Möglichkeit der Interaktion, wird das Erleben und die Wahrnehmung der Effekte intensiviert. Die Simulation des charakteristischen Klangabstrahlverhaltens erfolgt nicht durch eine rechenaufwändige Klangsynthese wie z.B. Physical Modeling, sondern basiert auf der Lautstärkeinterpolation einer Mehrkanalaufnahme. Die Verwendung der realen Aufnahmen ermöglicht eine annähernd naturgetreue Abbildung des Klangabstrahlverhaltens und ist, im Gegensatz zu rechenaufwändigen Klangsyntheseverfahren, echtzeitfähig. Zusätzlich wurde ein einfacher Filter entwickelt, der das charakteristische Klangabstrahlverhalten des Instruments eher qualitativ simuliert und sich problemlos in Echtzeit 3D-Anwendungen implementieren lässt. Die beiden entwickelten Methoden zur Simulation des Klangabstrahlverhaltens wurden mittels Spektralanalyse und anhand eines durchgeführten Hörtests auf ihre Funktionalität und ihre Gültigkeit überprüft.…
• This project aims at developing a virtual environment allowing the characteristic sound radiation patterns of a musical instrument to be experienced in real-time. A virtual environment will be created within which the user may freely move around a musical instrument, thereby receiving acoustic and visual feedback in real-time. Both the experience and the perception of auditory and visual effects are intensified by the combination of acoustic and visual elements, as well as the option of user interaction. The simulation of characteristic sound radiation pattern is based on interpolating the volume of a multi-channel recording, rather than a computationally intensive sound synthesis, as, for example, Physical Modeling. In contrast to computationally intensive sound synthesis, the use of real recordings offers a near-natural mapping of the sound radiation patterns in real-time. Additionally, a simple filter has been developed enabling the qualitative simulation of an instrument’sThis project aims at developing a virtual environment allowing the characteristic sound radiation patterns of a musical instrument to be experienced in real-time. A virtual environment will be created within which the user may freely move around a musical instrument, thereby receiving acoustic and visual feedback in real-time. Both the experience and the perception of auditory and visual effects are intensified by the combination of acoustic and visual elements, as well as the option of user interaction. The simulation of characteristic sound radiation pattern is based on interpolating the volume of a multi-channel recording, rather than a computationally intensive sound synthesis, as, for example, Physical Modeling. In contrast to computationally intensive sound synthesis, the use of real recordings offers a near-natural mapping of the sound radiation patterns in real-time. Additionally, a simple filter has been developed enabling the qualitative simulation of an instrument’s characteristic sound radiation patterns to be easily implemented within real-time 3Dapplications. Both methods of simulating sound radiation patterns have been evaluated with respect to their functionality and validity by means of a spectral analysis and an auditory experiment.…