Wykorzystanie pogłosu splotowego w rozszerzonej rzeczywistości audio

Wyobraź sobie, że przechodzisz przez próg swojego pokoju i nagle słyszysz szum oceanu oraz potężne odbicia dźwięku od skał, mimo że wciąż widzisz te same białe ściany. To nie tylko złudzenie – to precyzyjnie zaprojektowana przestrzeń akustyczna.

Technologia, którą widzisz na filmie, opiera się na rozwiązaniach doskonale znanych twórcom dźwięku do filmów oraz gier wideo, ale przenosi je bezpośrednio do naszej codzienności poprzez Rozszerzoną Rzeczywistość Audio (ang. Audio Augmented Reality).

Pogłos Splotowy

Pogłos splotowy (Convolution Reverb) to technologia „kopiowania” akustyki. Inżynierowie dźwięku rejestrują tzw. odpowiedź impulsową (IR) – cyfrowy zapis tego, jak dana przestrzeń (np. jaskinia, katedra czy studio nagraniowe) reaguje na dźwięk.

• W filmie: Pozwala to idealnie dopasować głos aktora nagrany w sterylnym studiu do lokacji widzianej na ekranie.

• W grach: Dzięki temu, gdy Twoja postać wchodzi do betonowego bunkra, każdy krok i strzał brzmi surowo i metalicznie, budując niesamowity poziom immersji.

AAR – Twoje mieszkanie jako mapa w grze

Ciekawym aspektem AAR jest jej podobieństwo do mechaniki gier. W silniku gry twórcy definiują tzw. „audio volumes” – strefy, w których dźwięk zmienia swój charakter. W przypadku rozszerzonej rzeczywistości audio, strefy te nakładamy na nasz rzeczywisty świat. Możemy zaprogramować nasz system tak, aby konkretne obszary w pokoju posiadały przypisaną charakterystykę różnych odpowiedzi impulsowych.
Jak to działa? Kiedy wchodzisz w wyznaczony obszar, algorytm w czasie rzeczywistym nakłada na docierające do Ciebie dźwięki parametry wybranej przestrzeni. Fizycznie jesteś w domu, ale akustycznie „teleportujesz się” do wnętrza gotyckiej katedry lub na otwarty brzeg morza.

To podejście zmienia sposób, w jaki postrzegamy otoczenie. Przestajemy być ograniczeni przez fizyczne właściwości naszych czterech ścian. Możliwość nadawania obszarom specyficznego brzmienia otwiera drzwi do nowej generacji przewodników turystycznych, interaktywnych instalacji artystycznych, a nawet narzędzi terapeutycznych, które pomagają nam się zrelaksować, zmieniając nasze biuro w kojący las – bez ruszania się z fotela.

Nauka stojąca za tym mechanizmem to fascynujące połączenie matematyki, fizyki i psychoakustyki. Dzięki niej granica między „tu i teraz” a „gdziekolwiek indziej” staje się cieńsza niż kiedykolwiek.