視聴状態によって映像体験を変化させる１つのシーンが6つの音声チャンネルを持った映像作品とのその再生装置。 普及しているテレビやネットなどのメディアを通じた映像体験を拡張する作品。風景の中に存在するが実際に聞くことはできないオーディオデバイスをつかったパーソナルな音声を、ヘッドホンを介して視聴する。環境音だけでは俯瞰状態になる視聴状態から、他のチャンネルに切り替えることで、中心視野の誘導と人物の様子の意味づけを行い、視聴状態を変換する。ヘッドホンからの音声で一度視聴を行い、意味付けが完了すると、その後その音声チャンネルを聞いていない状態でも、そのチャンネルに対応する人物の様子に理解が及んでいるため、音声を心的に再生できるようになる。このいわば心的な多重再生状態では、環境音のみを聞いている視聴状態であっても6つのチャンネルを心的に切り替えたり並行させたりしながら視聴をするという状態を引き起こす。 A video work with six audio channels in one scene that changes the video experience depending on the viewing state, and its playback device. This work extends the visual experience through popular media such as television and the Internet. The viewer watches personal audio through headphones using an audio device that exists in the scenery but cannot actually be heard. By switching from the viewer's bird's-eye view with only the environmental sound to another channel, the viewer's view is transformed by inducing a central vision and making sense of the person's appearance. Once the viewer has completed the process of meaning making by listening to the audio from headphones, he or she can mentally replay the audio even if he or she is not listening to that audio channel, because he or she has a better understanding of the person's appearance corresponding to that channel. This state of mental multiple playback, so to speak, causes the viewer to mentally switch between or parallel the six channels even when listening only to the environmental sounds.

openFrameworks, Adobe PremierPro, AfterEffects, iPhone, Headphone, Monitor

サウンドやろうぜ(2020)