ホームAI画像認識による作業の可視化・生産性向上とXＲ技術によるスキル継承

SDGsの分類

研究テーマ: IT・IoT・AI・ロボティクス

学科の分類: 情報科学部情報メディア学科

AI画像認識による作業の可視化・生産性向上とXＲ技術によるスキル継承

情報科学部

情報メディア学科

インタラクションデザイン研究室

佐野睦夫教授

深層学習画像認識ものづくり DX XR 生産性向上行動の可視化スキル継承トレーニング支援 AI

データを基に時間の速さをスコアとして強化学習を行い, 最適化された作業の動きと新人の動きを比較できるようにARグラス等を用いて可視化

研究者INFO: 情報科学部情報メディア学科インタラクションデザイン研究室佐野睦夫教授

研究シーズ・教員に対しての問合せや相談事項はこちら

技術相談申込フォーム

同じカテゴリーの研究シーズ

トモグラフィー画像の3次元可視化プログラムの作成

X線CTやMRIなどで撮影したトモグラフィー像（断層画像）の中から，注目領域だけを検出したり，立体構造を想像することは容易ではありません．画像処理技術や手法の応用により，注目領域のセグメンテーションとラベリング，立体構造の再構成を行い，三次元可視化するためのソフトウェアの開発に取り組んでいます．

深層学習を用いた物体領域推定のための学習データの生成支援

深層学習を用いたセグメンテーションのための学習では，物体が写っている画像を物体毎に数百枚から数千枚用意し，画像に写っている物体の輪郭情報を人手でアノテーションする必要があり，労力やコストがかかるという問題がある．一方，RGB-Dカメラは各画素に対応する距離に関する情報も同時に獲得できるカメラである．本研究では，深層学習を用いた物体領域推定（セグメンテーション）のための学習に必要な物体の輪郭情報をRGB-Dカメラを用いて人手によらずに高速に獲得する手法を開発した．

大須賀美恵子

ICT・ロボティクスのウエルネス分野への応用

心拍や呼吸，目の動きや脳波，筋電などを人に負担をかけずに測る技術と，それらから人の意図や気持ちを推定する手法の研究をしています．これらの人を測る技術とバーチャルリアリティなどの情報通信技術とロボティクスを組合わせて，さまざまな人のwellbeing(幸せ)に役立つシステム・サービスを提供します．

リッチインターネットアプリケーション

ファッション，グルメ，エンタメ，トラベル，スポーツ，流通，eラーニング，流通，医療・福祉，通信など我々の生活や社会インフラに関わるアプリケーションのプロトタイピングをし，新コンセプトを発信．役に立つ，便利，面白いを目標にシステム構築します．今回観光サポートアプリケーションとして，ある地域（枚方市）を疑似空間で歩いてもらい，様々な観光資源と触れ合ってもらいます．ランドマークに因んだミニゲームでポイントアップしつつ地域の魅力に触れてもらいます．

新しい熱物性値測定法

未来の発電所となる核融合炉では，数十億度の超高温プラズマを閉じ込める構造材料として傾斜機能材料が，宇宙旅行を実現するためのロケットエンジンでは，数千度の燃焼ガスを噴射する構造材料として炭素繊維強化炭素複合材料が開発されています．どちらの材料も，【熱が加えられたとき，どのような応答をするのか？】を調べることが重要です．そこで，伝熱工学研究室では，そのような最先端の材料内を熱が伝わる速さとその測定法を研究しています．

樹脂製マイクロ流体デバイスの量産に向けた拡散接合装置の開発

本技術は、主に金属の接合に用いられていた拡散接合を高分子樹脂に適用することで、医療用ディスポーザブルマイクロ流体デバイスの安価な量産の実現を目標としています。拡散接合は、母材を溶かすことなく接合界面を一体化するため、接合により透明性を損なうことはありません。さらに、多少の凹凸や切削痕が残っていても接合可能です。加工面への後処理も不要で、多種多様な高分子樹脂に対応可能です。現在、商用利用を目指して試作機を開発しており、テストサンプルとしてPMMA製のマイクロ流体デバイスの接合に成功しています。

手すりの上を移動する道案内ロボット

　本コミュニケーションロボットの特徴は、手すりの上を移動することである。ケータイや地図が読めない方でも問題なく、音声とジェスチャで指示してくれる。さらに人はロボットの手を握って誘導される。この時、ロボットの腕が伸び縮み可能なシステムを構築した。これにより、人の歩行速度に応じた無理のない道案内が可能である。本研究室でアルゴリズムを開発した「測域センサを用いた人検出システム」を応用しており、複数人が存在する環境内においても対象者を見失うことがなく、動作可能である。また、ロボットと案内される人の対話が破綻している場合等にオペレータが介入可能である。その介入頻度を簡易に制御可能であり、オペレータの負荷を軽減することが可能である。

主観・客観融合型の共創的VR／ARブラウジングシステムの構築

本研究は，VR／AR空間の閲覧経験を，実在の空間経験へとより近づける試みとして，VR／ARコンテンツを閲覧する際に，これまでのゴーグル等による閉鎖的，主観的視点だけでなく，公開性のある客観的（他者による）視点とを融合させた閲覧システムの構築を試みるものである。具体的には，仮想上に存在する建築物を，それぞれの閲覧端末ごとの視点に合わせて表示内容を変化させるシステムや，ある個人が端末を通して閲覧している内容を他者が共有したり，閲覧しているユーザー全体の位置関係を俯瞰するシステムなどの開発である。

融液内対流のモデル予測制御

融液内対流を制御する手法としては，るつぼの回転速度の調整，るつぼ側面の温度調整，磁場の印加などが制御入力の候補として考えられる．融液の対流現象を表現するための基礎方程式として，融液を非圧縮性流体と仮定すると，質量保存則から導かれる連続の式，運動量保存則から導かれるNavier-Stokes方程式，温度の拡散現象を表すエネルギー式，濃度の拡散現象を表す物質拡散方程式が挙げられる．これらの基礎方程式で記述される熱流体システムに対して，モデル予測制御系設計法が確立されている．

時系列データを用いたモデル化

近年の計算機システムの発展と利用環境の向上により、諸科学や産業界のあらゆる分野でデータが蓄積されている。このようにして大量に蓄積されたデータから、その背後にある自然現象や社会現象のような複雑かつ不確実な現象を読み解くには、データから本質的な情報を抽出するための手法の開発が不可欠である。このとき、不確実現象の解明と予測、知識獲得のために重要な役割を果たすのが現象のモデル化であり、時系列データを用いた現象のモデル化の問題に取り組む。

産業用ロボットの新しい価値基準の定義

今後，これまでの量産システムだけではなく，究極には一品物の生産に至るまでロボットを活用することが期待されている. 本研究では，生産機種切り替えの迅速化，設備の完全再利用といった新しい価値基準を定義し，その達成度を競う競技会で分野啓発を試みる.

超大規模組合せ最適化問題に対する新解法の提案

設計、割り当て、スケジューリング等、様々な問題は組合せ最適化問題として定式化できる。しかし、実応用において厳密に最適な解を求めるのが不可能な場合も多い。そのような状況においても可能な限り良質な解を探索するために、これまでにも遺伝的アルゴリズムのような手法が提案されているが、万能ではない。本研究では、特に超大規模な組合せ最適化問題を対象とし、確率論、統計論的な観点から、最適と考えられる方法を追究している。

弾性数理解析による材料設計

数理固体力学は材料・機械・建築・土木工学に限らず、広い応用分野の様々な現象に対応しているが、その応用の根幹となるのは「線形弾性力学」である。この弾性力学は応用の目的や現象に合わせて基礎微分方程式を解くことに帰着される。　本研究室では、苛酷な使用条件下にある機械・構造物の材料設計および安全性・信頼性評価を目的として、材料の電気・熱・力学的挙動を解明している。恩師から頂いた言葉「弾性体の平衡の問題においては、非常に一般的な大定理を打ち立てるよりは、種々の特解を求めて集積することで知識はもたらされる」を胸に、以下に示すような破壊力学解析を実施し、弾性数理解析の学問分野の確立を目指している。

地域資源の活用による都市・地域更新の手法

　現在、日本は拡大・成長の時代から、縮小・成熟の時代へと突入したと言える。もはや、スクラップ・アンド・ビルドによる都市更新の時代ではない。本研究室では、これからの時代における都市更新の手法について研究を行っている。身の回りに多く蓄積された「建築ストック」の活用を前提とし、さらには、成長の時代に蔑ろにされながらも命脈を保っている「地域性」を発見・増幅することによって、これからの「共同体」のあり方についても研究・提案を行っている。

深層学習における判断根拠の理解可能な潜在変数空間

深層学習は精度の高い処理を実現できるものの，判断根拠の理解が困難になりがちである．判断根拠が理解できないままでは実応用上問題が発生するケースも多い．例えば医用データ解析など，答えを誤った際の被害が甚大となる分野では現在でもこのような手法の全面利用が法律上規制されている．これに対し，本研究では潜在変数空間のdisentanglement化手法を応用して，目的とするタスクに関係の無い特徴を排除することで，判断根拠の理解が容易な潜在変数空間の獲得を実現した．本報告では実応用を想定した課題として，撮影環境の大きく異なる顔画像における表情認識などを扱う．この課題では被験者情報以外にも照明や化粧など，表情認識に関係の無い様々なバリエーションを持つデータベースを構築し，学習に際して表情認識に不要な特徴を取り除く手法を開発した．本手法を応用することで，表情認識精度と判断根拠可読性の向上を実現した．

医師と協働する手術支援マニピュレータ

執刀医が手術を一人で行える，安全性に優れるソロサージェリー手術支援ロボットを研究しています．人と同じ空間に存在し，共存協調して作業を行えるロボット技術の確立を目指して，内視鏡下手術におけるカメラと鉗子の助手をマニピュレータが担えるよう，医工・産学連携で取り組んでいます．医師のハイエンドツールであるオールインワンシステムのリモート(遠隔)操作型ロボットに対して，アシスタントツールであるローカル操作型ロボットLODEM(Locally Operated Detachable Endo-effector Manipulator)群は，センシング能力に優れる人と，安定した作業に優れるロボットが補完しあう，インテグレーションです．

高温高湿環境下の樹脂材が熱刺激電流に与える影響

電気配線, デバイス素子そして電気機器等の電気絶縁を保持する目的として, 樹脂材は重要な働きを担っている. 現在, 機器の小型化に伴い電界強度・電流密度が増加, その結果, 樹脂材はますます過酷な環境下での使用が要求されている. そこで高温高湿環境下での樹脂材の電気絶縁性を調べるため熱刺激電流(TSC)を計測, TSCスペクトルに与える影響を検討した. 一般にTSCスペクトルが単峰で計測される事は稀であるが, TSCスペクトルの可視化解析技術により, 信号の分離を可能にし, 単一信号の物性量を正確に評価できるに至る.

移動体の制御に関する研究

自動車や飛行機などの移動体の制御に関する位置計測システム，誘導制御システムの構築を目指して研究を行っている．位置計測システムについては，加速度計，ジャイロ，画像処理を用いた計測を融合し，移動体の位置を瞬時に計測することを目標にしている．誘導制御については，移動体の３次元的位置姿勢を制御するため，制御システムの動的特性を推定する同定を行ない，安定化制御を実現することを目標にしている．

高強度テラヘルツ光源の開発

非破壊測定，ガン検査などへの応用が期待されるテラヘルツ時間領域分光測定用の安価で取り扱いが容易な光源の開発を行っています．半導体薄膜やヘテロ構造を利用し，性能向上を図っています．従来，光源励起用に使われていた大型で高価なチタンサファイアレーザーに替え，小型で安価なファイバーレーザーを使用できる素子を開発しています．

超分子を用いる光学活性分子の高効率合成

キラル化合物を選択的に合成する触媒的不斉合成では，高価なキラル源や金属を利用したり，多段階の精密な合成手法と精製方法を駆使するなどの問題点がありました。そこで本研究では，構造がシンプルで簡単に合成できる輪状分子と軸状分子を適切に組み合わせることで得られる「機械結合性面不斉キラルインターロック超分子」に着目し，光学活性分子を高効率で合成する手法を開発しています。これまでに、このインターロック超分子の一つであるロタキサンを新たに合成し，特徴的な動的挙動や３次元構造を有効利用して、分子シャトル性能を評価しました。

© INNOVATION DAYS 2021 智と技術の見本市.