Misc - NISIMURA Ryuichi

Proposal for an Interactive 3D Sound Playback Interface Controlled by User behavior

Ryuichi Nisimura, Kazuki Hashimoto, Hideki Kawahara, Toshio Irino

Communications in Computer and Information Science ( Springer Verlag )  434   446 - 450   2014  [Refereed]

　View Summary

Our study introduces an interactive 3D sound playback interface system that is controlled by the user's behavior. It consists of an Android terminal, stereo headphone, and Nintendo Wii Balance Board. Traditional binaural audio systems can only deal with simple fixed playback conditions. On the other hand, our system assumes that the user is continuously moving. When a user who is riding on the Wii Balance Board moves his/her body, binaural sounds during playback are generated according to changes in his/her center of gravity. To implement the system, we have prepared a set of twenty-four acoustic signals for embedding into the system. If the user's center of gravity corresponds with one of the twenty-four regions, an acoustic signal recorded in advance corresponding to that region is reproduced for the user. We experimentally evaluate how accurately a user can judge the position of a sound source. Experimental results prove the proposed system yielded significantly higher locational accuracy than the original binaural system. © Springer International Publishing Switzerland 2014.

DOI

近似時変フィルターを用いたグロウル系統の歌唱音声合成の検討

溝渕翔平, 西垣友理, 西村竜一, 入野俊夫, 河原英紀

日本音響学会関西支部第16回関西支部若手研究者交流研究発表会 ( 日本音響学会関西支部 )    2013.12

Spectrally estimaed vocal tract lengths of singing voices and their contributing factors

Makoto Sakaguchi, Mayuko Kobayashi, Ryuichi Nisimura, Toshio Irino, Hideki Kawahara

MAVEBA 2013 (8th International Workshop on Models and Analysis of Vocal Emissions for Biomedical Applications) ( MAVEBA Workshop )    2013.12  [Refereed]

聴覚における寸法知覚の練習効果に関する検討

山本航大, 入野俊夫, 河原英紀, 西村竜一

日本音響学会関西支部第16回関西支部若手研究者交流研究発表会 ( 日本音響学会関西支部 )    2013.12

留学生向け日本語能力測定システムのためのUI設計 〜HTML5を用いた音声入力インタフェース〜

田藤千弘, 西村竜一, 河原英紀, 入野俊夫, 今井新悟

日本音響学会関西支部第16回関西支部若手研究者交流研究発表会 ( 日本音響学会関西支部 )    2013.12

オージオグラムから難聴者の聞こえを再現するシステムの開発

永江美沙貴, 入野俊夫, 西村竜一, 河原英紀

日本音響学会関西支部第16回関西支部若手研究者交流研究発表会 ( 日本音響学会関西支部 )    2013.12

環境音収集アプリのためのUI設計 ~クラウドソーシング型データ集積サービスの提案~

松山みのり, 津田貴彦, 西村竜一, 河原英紀, 入野俊夫

日本音響学会関西支部第16回関西支部若手研究者交流研究発表会 ( 日本音響学会関西支部 )    2013.12

環境音分類結果に基づく収録アプリのインターフェース設計

松山 みのり, 津田 貴彦, 西村 竜一, 河原 英紀, 山田 順之介, 入野 俊夫

日本音響学会2013年度秋季研究発表会 ( 日本音響学会 )    1387-1388   2013.09

スペクトル距離に基づく声道長推定における歌い手および基本周波数の影響について

坂口 諒, 小林 真優子, 入野 俊夫, 西村 竜一, 河原 英紀

日本音響学会2013年度秋季研究発表会 ( 日本音響学会 )    381-382   2013.09

日本語母音データベースを用いた任意発声の相対的声道長の推定について

小林 真優子, 坂口 諒, 西村 竜一, 入野 俊夫, 河原英紀

日本音響学会2013年度秋季研究発表会 ( 日本音響学会 )    435-436   2013.09

対数Swept-Sineで変調した帯域雑音によるMTF測定

苔口 祐樹, 金内 由紀, 西村 竜一, 河原 英紀, 入野 俊夫

日本音響学会2013年度秋季研究発表会 ( 日本音響学会 )    1005-1006   2013.09

波形の高次対称性に基づく基本周波数抽出法における潜在変数ダイナミクスの導入について

河原 英紀, 森勢 将雅, 榊原 健一, 西村 竜一, 入野 俊夫

日本音響学会2013年度秋季研究発表会 ( 日本音響学会 )  2013   279-282   2013.09

S-CATの音声認識における言語モデル(特別セッション 音声認識技術を応用したコンピュータ自動採点日本語スピーキングテストの開発)

西村 竜一

日本行動計量学会第41回大会 ( 日本行動計量学会 )    42-43   2013.09

説明対話における韻律情報および頭部運動と感情評価値の関連性分析の試み

八木みゆき, 森田礼子, 中井正人, 西村竜一, 河原英紀, 入野俊夫

電子情報通信学会・日本音響学会 音声研究会 ( 電子情報通信学会・日本音響学会 音声研究会 )    信学技報, vol. 113, no. 220, SP2013-67, pp. 15-20, 2013年9月.   2013.09

基本周波数操作による音声の好感度改善に関連する物理的特徴の検討

吉元 照貴, 西村 竜一, 入野 俊夫, 河原 英紀

日本音響学会2013年度秋季研究発表会 ( 日本音響学会 )    335-336   2013.09

Frequency-proportional dilation and compression in singing voice spectra and contributing factors

SAKAGUCHI Makoto, KOBAYASHI Mayuko, IRINO Toshio, NISIMURA Ryuichi, KAWAHARA Hideki

Technical report of IEICE. EA ( The Institute of Electronics, Information and Communication Engineers )  113 ( 134 ) 9 - 14   2013.07

　View Summary

A new estimation method of relative vocal tract length was proposed based on short time Fourier analysis and demonstrated its high reproducibility. The proposed method is based on an interference-free power spectral representation of periodic signals. The interference-free envelope spectrum is preprocessed by removing global spectral shape, which is dependent on the glottal source waveform and the radiation characteristic from mouth opening. It also preprocessed by smoothing excessive spectral details such as; differences of formant peak bandwidths, spectral dips caused by vocal tract branching, existence of closing phase of vocal fold and three dimensional vocal tract shape. Spectral distance calculation of preprocessed spectra using only relevant frequency region is introduced to alleviate disturbing factors other than vocal tract length differences. This article reports application of the proposed method on singing voices for investigating effects of singers' individual differences and voice pitch on the estimated relative vocal tract lengths. It also discusses possible application to computer assisted voice training.

モバイル携帯端末を用いた環境音収集とその認識手法の検討

津田 貴彦, 中西 恭介, 松山 みのり, 西村 竜一, 山田 順之介, 河原 英紀, 入野 俊夫

情報処理学会第99回音楽情報科学研究会（音学シンポジウム2013） ( 情報処理学会音楽情報科学研究会 )  2013 ( 18 ) 2013-MUS-99-18 - 6   2013.05

　View Summary

本研究では、環境音を入力とするインターフェースを有するモバイルアプリケーションの開発を行っている。実現に必要なのは、環境音認識手法の開発と、環境音サンプルの収集及び、クライアントアプリケーションの実装である。認識システムを予備評価した結果、アルゴリズムの改良と学習用データの拡充が必要であることを確認した。この問題に対し、データ収集用のAndroidアプリケーションを作成し、学内ではサークル等の活動に伴う音を29時間24分、学外では電車の走行音や救急車のサイレン等の音を10時間36分にわたって集めることに成功した。本発表では、収集データの分類と、その認識手法について議論する。We have been developing an Android mobile application which can recognize environmental sound signals. This report describes environmental sound signal recognition method, our collection of environmental sounds, and an overview of the prototype system. In order to collect further samples of environmental sounds, Android applications for data collection was developed.

声から身体情報を求める

小林 真優子, 西村 竜一, 入野 俊夫, 河原 英紀

情報処理学会第99回音楽情報科学研究会（音学シンポジウム2013） ( 情報処理学会音楽情報科学研究会 )  2013 ( 47 ) 2013-MUS-99-50 - 6   2013.05

　View Summary

声を聴くと，何となくその人の体型が分かる．ここでは，母音だけを用いて相対的な声道長を推定する方法を提案する．この方法では，声道長以外の要因によるスペクトル形状変化の影響を軽減するために，スペクトル距離の計算に用いる帯域を制限し，スペクトルの大局的な平坦化と形状の過度な詳細の平滑化とを組合せている．6歳から56歳までの284名の男女が発声した母音と身体情報からなるデータベースを用いることで，これらの処理に用いるパラメタを決定した．母音だけを用いた簡易な方法にも関わらず，以前報告した聴覚モデルを用いた方法を凌駕する精度での声道長推定が可能であることを確認した．また，このデータベースに付与された身体情報を母音だけから推定できることを示した．When we hear a voice, we will see the person's body type somehow. In this article, we propose a method for estimating relative vocal tract length using only vowels. The proposed method consists of procedures to alleviate spectral deforming effects caused by other factors than the vocal tract length. They are selection of spectral region for calculating spectral distance, removal of global spectral shape, and smoothing of excessive details of spectrum. Parameter tuning of the proposed method was conducted by using a speech database with relevant physical data which consists of Japanese five vowels spoken by 284 male, female and adolescent talkers ranging from 6 to 56 years old. This simple vowel-based method found to provide better estimates than our previously proposed method. The proposed method also provides estimates of talkers' height and weight only from vowels using the relevant physical data stored in the database.

Higher order waveform symmetry measure and its application to periodicity detectors for speech and singing with fine temporal resolution

Hideki Kawahara, Masanori Morise, Ryuichi Nisimura, Toshio Irino

IEEE ICASSP2013 (2013 IEEE International Conference on Acoustics, Speech, and Signal Processing) ( IEEE )    6797-6801   2013.05  [Refereed]

音声認識を応用した大人・こども話者識別法における言語的特徴の利用

西村竜一

情報処理学会第75回全国大会 ( 情報処理学会 )    41-42   2013.03