HTML5 Webook

52/102

内に立体映像を高精度で定位させて表示させることができる。今回の実験では、人物の立体構造の抽出・伝送にかかる計算時間を最小限に抑える手法を考案して実装し、実時間でスムーズな会話が可能な遠隔コミュニケーションを実現できた。この複合現実のテレプレゼンス技術は、遠隔にいる相手と空間の共有感を促進するとともに、取得した立体映像情報に操作を加えることで更なる心理的効果を生み出せる。例えば、相手の立体映像の向きを調整することで視線を一致させることもでき、より自然な意思疎通が可能になると考えられる。今後、このような効果の検証実験を通じて、本技術の社会展開を図っていく予定である。おわりに本稿では、CiNetの多感覚認知グループで実施しているヒトの多感覚認知メカニズムの研究に関して、その狙い、最新の成果、将来の応用について概説した。一方、このような取組は、研究室内の活動にとどまらず、産学官のフォーラム活動を通じて、我が国におけるこの分野の活性化と技術・知見の社会的普及に努めている[24]。また、脳科学・人間科学と情報通信技術に関する異分野融合の研究開発を通じて、地域活性化にも貢献してきている[25]。当研究グループでは、今後更に、感覚・感性の本質を探る研究を進めるとともに、そこで開発された解析技術や得られた科学的知見を社会に活用・展開していきたいと考えている。【参考文献【1Y. Sakano and H. Ando, “Effects of head motion and stereo viewing on perceived glossiness,” Journal of Vision, 10(9):15, pp.1–14, 2010.2A. Wada, Y. Sakano, and H. Ando, “Human cortical areas involved in perception of surface glossiness,” NeuroImage, 98, pp.243–257, 2014.3A. Wada, Y. Sakano, and H. Ando, “Differential responses to a visual self-motion signal in human medial cortical regions revealed by wide-view stimulation,” Frontiers in Psychology, 7:309. doi: 10.3389/fpsyg.2016.00309, 2016.4P. Mokhtari, H. Takemoto, R. Nishimura, and H. Kato, “Frequency and amplitude estimation of the first peak of head-related transfer functions from pinna anthropometry,” Journal of the Acoustical Society of America (JASA), vol.137 no.2, pp.690–701. 2015.5P. Mokhtari, H. Takemoto, R. Nishimura, and H. Kato, “Vertical normal modes of human ears: individual variation and frequency estimation from pinna anthropometry,” Journal of the Acoustical Society of America (JASA), vol.140, no.2, pp.814–831. 2016.6A. Callan, D. Callan, and H. Ando, “Neural correlates of sound exter-nalization,” NeuroImage, 66, pp.22–27, 2013.7A. Callan, D. Callan, and H. Ando, “An fMRI study of the ventriloquism effect,” Cerebral Cortex 25, pp.4248–4258, 2015.8P. Mokhtari and H. Ando, “Iterative optimal preemphasis for improved glottal-flow estimation by iterative adaptive inverse filtering,” Proc. Interspeech, pp.1044–1048, DOI: 10.21437/Interspeech.2017-79. 2017.9安藤広志，J. Liu，D. W. Kim，“多感覚インタラクション技術とシステム応用，”情報通信研究機構季報，vol.56 nos.1/2 2010.10J. Liu and H. Ando, “Hearing how you touch: Real-time synthesis of contact sounds for multi-sensory interaction,” Proc. IEEE Conf. Human System Interaction, pp.275–280, 2008.11J. Liu and H. Ando “Metal sounds stiffer than drums for ears, but not always for hands: Low-level auditory features affect multisensory stiff-ness perception more than high-level categorical information,” PLoS ONE, 11(11): e0167023. doi:10.1371/journal.pone.0167023, 2016.12J. Liu and H. Ando “Response modality vs. target modality: Sensory transformations and comparisons in cross-modal slant matching tasks,” Scientific Reports, 8: 11068, DOI:10.1038/s41598-018-29375-w, 2018.13D.W. Kim and H. Ando, “Development of directional olfactory display,” Proc. VRCAI (Virtual Reality Continuum and is Applications in Industry), ACM SIGGRAPH, 2010.14安藤広志, ““香り”を瞬時に切り替えられる「香り噴射装置」の開発, ” ITUジャーナル vol.43（7）, 2013.15NICT発ベンチャー（株）アロマジョイン（2012年10月設立）：https://aromajoin.com/16西野由利恵, D.W. Kim, J. Liu, 安藤広志， “香りが人の感触に与える効果に関する心理物理学的分析,” 日本バーチャルリアリティ学会誌, 19（1） 17–23, 2014.17Y. Tsushima, Y. Nishino, and H. Ando, “Olfactory stimulation affects motion perception, ECVP abstract, p.114, 2017.18西野由利恵, 村井紀彦, 安藤広志, “デジタル式嗅覚検査システムの研究開発：嗅覚障害患者を対象とした嗅覚感度測定,” 日本味と匂学会第51回大会 Proceedings集, 2017.19N. E. Nawa and H. Ando, “Classication of self-driven mental tasks from whole-brain activity patterns,” PLoS ONE 9:e97296. doi: 10.1371/journal.pone.0097296, 2014.20N. E. Nawa and H. Ando, “Retrieving binary answers using whole-brain activity pattern classification,” Frontiers in Human Neuroscience, 9:689. doi: 10.3389/fnhum.2015.00689, 2015.21G. Durantin, F. Dehais, N. Gonthier, C. Terzibas, and D. Callan, “Neural Signature of Inattentional Deafness,” Human Brain Mapping 38(11):5440–5455. DOI: 10.1002/hbm.23735, 2017.22D. Callan, T. Gateau, G. Durantin, N. Gonthier, and F. Dehais, “Disruption in neural phase synchrony is related to identification of inattentional deafness in real-world setting,” Human Brain Mapping 2018;00:1-13. DOI: 10.1002/hbm.24026, 2018.23M. Joachimczak, J. Liu, and H. Ando, “Real-time mixed-reality telepres-ence via 3D reconstruction with HoloLens and commodity depth sen-sors,” Proc. the 19th ACM International Conference on Multimodal Interaction (ICMI), pp.514–515, 2017.24超臨場感コミュニケーション産学官フォーラム（URCF）：http://www.urcf.jp/25けいはんなリサーチコンプレックス事業：http://keihanna-rc.jp/安藤広志 （あんどう　ひろし）脳情報通信融合研究センター脳機能解析研究室副室長Ph.D.認知脳科学、多感覚情報処理、多感覚インタラクション和田充史 （わだ　あつし）脳情報通信融合研究センター脳機能解析研究室研究員博士（情報学）脳機能イメージング、視覚情報処理、人工知能448　　　情報通信研究機構研究報告 Vol. 64 No. 1 （2018）5　脳機能の理解と知見応用のための各種アプローチ