Por dentro da orquestra com realidade virtual

Você já se perguntou como seria acompanhar um concerto do ponto de vista de um violinista de uma orquestra? Ou de alguém que toca tímpanos, violoncelo, flauta ou trompa. E do maestro? O prazer e a audição da música mudam, e não por pouco. A experiência pode ser feita “ao vivo” graças à bela iniciativa “Dentro l'Orchestra” da Orchestra Milano Classica , que encena alguns concertos nos quais o público pode sentar-se fisicamente ao lado dos maestros, ou, mais simplesmente, com o SOAVE – Stage Orchestra Audio Video Experience , uma experiência imersiva em realidade virtual que permite vivenciar um concerto sinfônico diretamente de dentro da orquestra , através dos olhos e ouvidos de seus protagonistas. O Soave, um projeto financiado pelo Consorzio Meditech, é o resultado da colaboração entre a ETT, empresa que lida com inovação tecnológica e comunicação digital parte do Dedagroup, a Fundação Haydn de Trento e Bolzano e a E-Volution.

Graças à criação de sete gravações simultâneas de áudio e vídeo, o público pode vivenciar o concerto de diferentes perspectivas – do pódio do maestro às seções de cordas e sopros, passando pelos demais instrumentos –, imergindo-se, graças aos espectadores de Realidade Virtual, em um ambiente sonoro e visual totalmente imersivo. As imagens de vídeo em 360 graus e o áudio, que muda de acordo com a posição escolhida dentro da orquestra, permitem capturar cada detalhe, nuance e vibração musical, como se você realmente fizesse parte do conjunto . orquestral.

Giovanni Verreschi, CEO da ETT disse: “Soave combina arte e tecnologia, sensibilidade artística e inovação digital, com o objetivo de tornar a música sinfônica mais acessível e imersiva. Trabalhamos no projeto pensando em um público heterogêneo e na atuação de conservatórios, museus, teatros, centros de experimentação e escolas, partes ativas das mudanças em curso no cenário cultural .

Equipados com óculos de realidade virtual (RV), os usuários podem escolher livremente a posição dentro da orquestra para vivenciar o concerto, percebendo em tempo real as mudanças acústicas (a reprodução sonora é excelente) e visuais geradas pela perspectiva explorada periodicamente. A experiência é possível graças às tecnologias avançadas desenvolvidas pela ETT , incluindo um mecanismo de áudio espacial e conteúdo multilíngue, projetado para uso versátil em contextos museológicos e educacionais ou em espaços dedicados à performance artística. Quando o usuário muda de posição, os óculos de realidade virtual atualizam automaticamente a fonte de som e vídeo, reiniciando a música de onde foi interrompida.

Além do headset de VR, a experiência também está disponível em streaming síncrono e no site dedicado .

Também foi projetado um protótipo de uma instalação imersiva física , permitindo que o público se mova fisicamente por uma sala de concertos equipada com multiprojeções e alto-falantes direcionais. O sistema foi validado por meio do uso de um gêmeo digital, uma técnica com a qual a instalação física é simulada digitalmente para testar sua eficácia cênica e imersiva de forma rápida e econômica.