多様な歌唱スタイルに対応した楽曲検索システム
データベース中から楽曲を検索する際,題目や歌手名,といったメタ情報ではなく,楽曲を直接歌唱することで簡単に検索できるシステムを開発しています。 ハミング歌唱や歌詞による歌唱に加え,擬音語による歌唱にも対応し,またメロディの誤りや歌詞の誤りといった現象に対しても高精度に検索するための各種技術を開発しています。
隠消現実感(Diminished Reality)とは、映像中の不要物体の上に背景画像を重畳することで、不要物体をリアルタイムで視覚的に取り除く技術であり、映像中に仮想的な物体を重畳する拡張現実感(Augmented Reality) とは反対の概念を持ちます。本シーズでは、画像修復技術を用いて不要物体の周辺情報から尤もらしい背景画像を生成し、かつ背景の形状を推定することで、移動するカメラの映像から物体をリアルタイムで取り除きます。
論文
「Diminished reality based on image inpainting considering background geometry」(2016)『IEEE Transactions on Visualization and Computer Graphics』22(3)p.1236-1247.
「Augmented reality marker hiding with texture deformation」(2017)『IEEE Transactions on Visualization and Computer Graphics』23(10)p.2288-2300.
「平面上の拡張現実感マーカ除去におけるハイライトの再現」(2016)『日本バーチャルリアリティ学会論文誌』21(4)p.665-674.
研究シーズ・教員に対しての問合せや相談事項はこちら
技術相談申込フォーム