マルチモーダルのコンテキスト認識聴力機器のための耳に枯れた参照データ収集と注釈

この作業では、現実の状況では目立たずに頭の動きを捉えるために、新しく開発された耳に覆われたセンシングと注釈装置を提示します。マルチモーダル聴力機器（HIS）の開発の文脈で設計されていますが、このアプリケーションドメインに限定されません。耳に覆われたデバイスは、三軸の加速、回転率、磁場をキャプチャし、ユーザーを介したリアルタイムデータアノテーションのための1つのボタンアプローチを備えています。システムランタイムは、128 Hzのサンプリングレートで5時間以上です。21人の参加者とのユーザー調査では、デバイスは快適であると認識され、耳に堅牢なホールドを示しました。ヘッドアクセラレーションデータの例では、監視なしクラスタリングを実行して、マルチモーダルHISのヘッド運動の利点を実証します。私たちは、この新しいテクノロジーがHIテクノロジーの境界を押し広げるのに役立つと考えています。

In this work we present a newly developed ear-worn sensing and annotation device to unobtrusively capture head movements in real life situations. It has been designed in the context of developing multimodal hearing instruments (HIs), but is not limited to this application domain. The ear-worn device captures triaxial acceleration, rate of turn and magnetic field and features a one-button-approach for real-time data annotation through the user. The system runtime is over 5 hours at a sampling rate of 128 Hz. In a user study with 21 participants the device was perceived as comfortable and showed a robust hold at the ear. On the example of head acceleration data we perform unsupervised clustering to demonstrate the benefit of head movements for multimodal HIs. We believe the novel technology will help to push the boundaries of HI technology.