正面紹介された迫り来る音は、視覚的な迫り来るオブジェクトの知覚されたサイズを選択的に変化させます

刺激の空間的一貫性に応じたクロスモーダル相互作用を支配する空間ルールの蓄積された証拠にもかかわらず、刺激の3D空間的一貫性（つまり、身体のフロント/リア）が視聴覚相互作用を調節するかどうかはまだ不明です。体の前後の空間から提示された強度の増加/減少（迫り来る/後退音）が動的視覚オブジェクトのサイズの知覚にどのように影響するかを調査しました。参加者は、サイズマッチングタスク（実験1および2）と、直径の増加/減少を伴う視覚刺激のサイズ調整タスク（実験3）を実行し、強度が増加/低下して前後の音にさらされました。これらの実験を通して、我々は、正面参照の迫り来る音のみが、空間的に一貫した迫り来る視覚刺激のサイズの過大評価を引き起こしたが、空間的に一貫性がなく、後退する視覚刺激の過大評価を引き起こすことを実証した。後退する音は視力に大きな影響を与えませんでした。我々の結果は、迫り来る音が、視聴覚刺激の近づいた品質の一貫性と前後の空間的位置に応じて動的な視覚サイズの知覚を変えることを明らかにし、人間の脳が3Dの空間的一貫性に基づいて視聴覚入力を異なって処理することを示唆しています。迫り来る信号間のこの選択的相互作用は、近づく脅威のより速い検出に寄与するはずです。私たちの調査結果は、視聴覚相互作用を管理する空間ルールを3D空間に拡張します。

In spite of accumulating evidence for the spatial rule governing cross-modal interaction according to the spatial consistency of stimuli, it is still unclear whether 3D spatial consistency (i.e., front/rear of the body) of stimuli also regulates audiovisual interaction. We investigated how sounds with increasing/decreasing intensity (looming/receding sound) presented from the front and rear space of the body impact the size perception of a dynamic visual object. Participants performed a size-matching task (Experiments 1 and 2) and a size adjustment task (Experiment 3) of visual stimuli with increasing/decreasing diameter, while being exposed to a front- or rear-presented sound with increasing/decreasing intensity. Throughout these experiments, we demonstrated that only the front-presented looming sound caused overestimation of the spatially consistent looming visual stimulus in size, but not of the spatially inconsistent and the receding visual stimulus. The receding sound had no significant effect on vision. Our results revealed that looming sound alters dynamic visual size perception depending on the consistency in the approaching quality and the front-rear spatial location of audiovisual stimuli, suggesting that the human brain differently processes audiovisual inputs based on their 3D spatial consistency. This selective interaction between looming signals should contribute to faster detection of approaching threats. Our findings extend the spatial rule governing audiovisual interaction into 3D space.