ホーム二次元画像1枚からのキャラクターの姿勢制御

SDGsの分類

研究テーマ: IT・IoT・AI・ロボティクス

学科の分類: ロボティクス&デザイン工学部システムデザイン工学科

二次元画像1枚からのキャラクターの姿勢制御

ロボティクス＆デザイン工学部

システムデザイン工学科

知能情報処理研究室

瀬尾昌孝准教授

深層学習画像生成 CG

三次元構造や動きに関する特徴を獲得可能な深層生成モデルに人間の取り得る姿勢を学習させることで，類似の形状を持つ対象（本研究ではキャラクター）の姿勢制御を実現した．未知の二次元画像1枚からの姿勢制御が可能である．本研究は映像制作支援システムとしての発展を想定している．

研究者INFO: ロボティクス＆デザイン工学部システムデザイン工学科知能情報処理研究室瀬尾昌孝准教授

研究シーズ・教員に対しての問合せや相談事項はこちら

技術相談申込フォーム

同じカテゴリーの研究シーズ

日本随一の教育・実証用バイオリアクターで「持続可能型社会」に貢献

国立研究開発法人新エネルギー・産業技術総合開発機構（NEDO）のプロジェクト「カーボンリサイクル実現を加速するバイオ由来製品生産技術の開発」において、二酸化炭素が光固定された植物由来原料からバイオ由来製品を生産する技術の開発・最適化を迅速化するための技術開発を行っています。標準化・試作支援・技術者育成の３つを柱にして取り組んでいます。

カメラを用いた人の非接触状態計測

カメラの映像から顔や顔のパーツ，身体の動きを検出して生体信号を計測したり，計測した情報を応用するシステムを作成しています．また，計測したデータが，実際のセンサで計測したデータとどのくらい一致するのか，どんな風に違っているのかについて比較，解析しています．カメラを用いたウェアレス（非接触）での計測とその応用について検討しています．

生体電位計測を用いたアプリケーションの創出

ヒトの体からは臓器の活動や筋の収縮に伴い微弱な電気信号（生体電位）が発生しています．医療現場で病気の判断等に用いられていたこれらの電気信号は，近年の計測技術の発展によりより日常での計測が可能になりつつあります．生体電位の計測結果からはユーザの状態，例えばどのくらい心拍が変動しているか？どのくらい筋力が発揮されているか，などが定量化できるため，この定量値を基づいて自然な形でユーザを「推定・理解・予測」する様々なユーザ支援アプリケーションの実現が可能となります．

生体の運動制御メカニズムを取り入れた人と親和性の高い介護支援ロボット

人間の神経系や筋骨格系の構造は長い進化の過程で日常生活を行うのに適した形に最適化されてきたものと考えられています。本研究では進化の過程で生物が獲得してきた運動制御メカニズムをロボットに取り入れることにより，動力を使用せずに人やモノの自重を支持できる機械式自重補償装置や，脳の運動制御メカニズムを取り入れた環境適応制御，小脳－大脳基底核をモデル化したニューラルネットワークによる予測的な環境認識・最適行動生成を実現する研究を行っています。

教師役のロボット・バーチャルエージェントのデザイン

オンライン授業や教室で、人間の教師に代わって授業を行うロボット・バーチャルエージェントのデザインについて、探索的に実験研究を行う。特に、教師役のロボット・バーチャルエージェントの「外見」「発話」と、「教える科目」との相互関係に着目し、教える科目に応じてロボット・バーチャルエージェントをデザインするためのメソッドを提案することを目指す。

図面分析による建築設計プロセスの解明

優れた建築を検証する方法は、建築が現存する場合は現地調査が基本であるが、設計図面分析もまた、建築特徴を包括的にとらえるという点において有効である。結果としての設計図面は、作品の特徴を後世に伝えてくれる。一方で検討途中の図面もまた、検討プロセスの記録として重要な価値を持つ。何時、何をどのように検討したか。その解明は作家研究の枠を超えて普遍的な設計方法探求のヒントとなる。

メカトロニクス技術、パワーエレクトロニクス技術を用いた電気機器の効率的な利用法

電気機器の利用は他分野に渡っており、その効率的な利用法が求められています。それぞれの電気機器は直流あるいは交流が用いられていますが、近年のパワーエレクトロニクス技術の発展により電力変換機器を用いて直流と交流の電圧や電流、周波数や位相を自由に変換することが出来るようになりました。本研究室では様々な電気機器を用いて電気を作るから使うまで、効率的な利用法を研究しています。

深層学習における判断根拠の理解可能な潜在変数空間

深層学習は精度の高い処理を実現できるものの，判断根拠の理解が困難になりがちである．判断根拠が理解できないままでは実応用上問題が発生するケースも多い．例えば医用データ解析など，答えを誤った際の被害が甚大となる分野では現在でもこのような手法の全面利用が法律上規制されている．これに対し，本研究では潜在変数空間のdisentanglement化手法を応用して，目的とするタスクに関係の無い特徴を排除することで，判断根拠の理解が容易な潜在変数空間の獲得を実現した．本報告では実応用を想定した課題として，撮影環境の大きく異なる顔画像における表情認識などを扱う．この課題では被験者情報以外にも照明や化粧など，表情認識に関係の無い様々なバリエーションを持つデータベースを構築し，学習に際して表情認識に不要な特徴を取り除く手法を開発した．本手法を応用することで，表情認識精度と判断根拠可読性の向上を実現した．

産業用ロボットの新しい価値基準の定義

今後，これまでの量産システムだけではなく，究極には一品物の生産に至るまでロボットを活用することが期待されている. 本研究では，生産機種切り替えの迅速化，設備の完全再利用といった新しい価値基準を定義し，その達成度を競う競技会で分野啓発を試みる.

空中への３次元映像表示技術

　近年，非接触型タッチパネルなどのニーズの高まりとともに，空中に映像を表示する技術（空中映像技術）の研究が盛んになっている．現在，テンキーやメニュー画面などの２次元映像を空中に表示し，非接触でインタラクティブ操作する装置が開発されている．本研究では，ボリュームや視差がある３次元映像を空中に表示する技術を実現し，より多彩なインタラクション操作が可能な映像メディアの実現と幅広い分野への応用を目指している．

容易に構築できる球面ディスプレイ環境

球面型没入ディスプレイ環境構築をサポートするシミュレータを開発した．球面ディスプレイを作る際には，ドームスクリーンへの特殊な歪み補正を考慮した投影系の光学設計を行う必要がある．しかし，実際に製作される光学系はシミュレーション通りの精度が保証されるわけではない．使用する際に改めて光学系の微調整が必要となる．本研究では，投影系の光学設計と同時に，光学系の微調整や歪み補正が実行可能な投影シミュレータを開発している．

ドローンの閉ループシステム同定によるモデリングと飛行制御

幅広い産業でビッグデータの活用が進んでいるが，予測・診断・制御・意思決定の精度向上に際してモデルの重要性が近年ますます高まっている．データエンジニアリングのひとつの分野として，システム同定法によるデータ駆動モデリングについて紹介する．具体例として，MOESP型閉ループ部分空間同定法(CL-MOESP)によるドローンの閉ループ同定と，得られた同定モデルを利用した最適制御器設計の事例研究を紹介する．

既設照明によるかんたん屋内定位技術 CEPHEID(セファイド)

屋内に設置されている照明光は、多くの場合個体差があります。「部屋A」と「部屋B」の照明機器はたとえ同一モデルであっても微妙な個体差があるのです！もちろん人間が目で見てわかる違いではありません。本技術はそれをAIで識別し、屋内の位置推定に用います。

二硫化モリブデン/グラフェンの電気特性とガスセンサー応用

〔概要〕酸化膜付きのSi基板上にMoを電子ビーム蒸着させ，Moを硫化させることにより二硫化モリブデン薄膜を作製した．この二硫化モリブデンのトランジスタ動作も確認した．グラフェンと二硫化モリブデンのファンデルワールスヘテロ接合を作製し，その抵抗変化による水素ガスと一酸化窒素ガスの検知特性を調べた．CVDグラフェン単体よりも，二硫化モリブデン/グラフェンのヘテロ接合の抵抗変化が大きいことを確認し，ガスセンサー応用を目指している．

フレキシブルデバイス作製のための基盤技術

有機分子や，酸化物ナノ材料など物質のもつ多彩な機能や物性を応用し，フレキシブルFETデバイスやバイオセンシングなどのナノシステムデバイス創成することを目指しています．物質中の電子を情報システムに組み込めるようなデバイス機能につながる物質の性質（物性）を探求しています．電気測定をはじめ，分光特性，構造解析，分子動力学計算およびナノ構造作製技術を用いて基礎物性をベースとして得られた知見をもとに，デバイス機能への展開を目指しています．特に，ナノ加工技術や精密な薄膜形成手法が得意分野です．この分野では，有機半導体ナノワイヤや分子超格子構造，誘導自己組織化と逐次浸透合成を組合せた微細構造作製などなど，新しい独自の技術を目指しています．

欠陥データを利用したソフトウェアプロジェクト比較手法に関する研究

本研究では様々なドメインや開発スタイルに属するソフトウェア開発に対して有効なソフトウェア信頼性モデルを構築し活用方法を広く普及することでソフトウェア開発をより効果的で制御可能とすること目的とします。そのためには多くの企業の開発データの収集方法および普及方法としてウェブアプリケーションの開発が必要です。また企業の開発データのみならずオープンソースソフトウェアにおける開発データも対象とします。本研究を行うことで現在困難とされている開発スケジュールの定量的な決定に役立つと考えられます。

日常行動からの認知機能の評価方法に関する研究

高次脳機能障がい者に対するリハビリテーションにおいて，“気づき”を与えることは重要な課題であります．“気づき”を与えるためには，自身の体験映像と現状の認知状態を定量的にした点数を振り返る必要があります．しかし，従来の認知状態を把握するためにはBADSやD-CATと呼ばれる検査キットで把握するため，リアルタイムな状態を把握することが困難で，毎日検査キットを利用することは難しいです．本研究では，日常行動（調理や掃除など）から認知状態を把握する指標を提案し，リアルタイムかつ日々の認知状態の取得を目的として研究しています．

盲導犬とユーザーの快適な歩行の実現に関する研究

　建築構造設計において利用される構造解析方法に基づくデザインをプロダクトデザインに応用することについて研究を行っている。　本研究は，プロダクトデザイン研究室（赤井准教授），兵庫盲導犬協会と共同で盲導犬とユーザーの安全で快適な歩行を実現するために，歩行時の盲導犬とユーザーの負荷の定量化を行い，その負荷を軽減するハーネス，盲導犬からの情報をより的確にユーザーに伝達するハーネスの開発を目的にしている。

非把持双腕ロボットによる摩擦力補償無しでの抱きかかえ制御

本研究では，力学的な本質を失わず，3次元運動を2次元運動に簡略化し，要介護者を二つの関節を持った3リンクの物体とみなす．そして，非把持双腕ロボットアームとリンクの間の静止摩擦を利用し，3リンク物体がロボットアームから滑り落ちないための安定領域を求め，その中に摩擦力が最も小さくなる姿勢を求める．得られた最適な角度を用いて，ロボットの抱きかかえ制御を行い，3リンク物体の安定支持が実現できることを示す．

自動発注問題を題材としたIT人材育成教材

ビッグデータ処理、人工知能、クラウドの各技術を融合して社会の具体的な課題を解決できる人材の育成を目指して、スーパーマーケットにおける自動発注問題を課題として設定したPBLを設計・実装しました。システムを構成する各要素技術のみならず、チームでコンセンサスを得る方法やその難しさ、役割分担による開発、そのためのコミュニケーションなども経験できるようにしました。これまでに延べ236名を対象に実施し、アンケート結果等からその有用性を確認しました。

© INNOVATION DAYS 2021 智と技術の見本市.