機械学習によるユーザの意図を反映した背景 CG の自動生成
本研究では，深層学習を用いた背景CGの自動生成システムを提案する．提案システムは，ユーザが描いた道路画像から，建造物の形状，景観，配置を決定した背景3DCGを自動生成する．また，生成過程に2種類の深層学習を効果的に用いることで，高速な自動生成を実現する．国土地理院が公開する基盤地図情報から生成した学習モデルを使用することで，リアルな3DCGの生成が可能である．
執刀医が手術を一人で行える，安全性に優れるソロサージェリー手術支援ロボットを研究しています． 人と同じ空間に存在し，共存協調して作業を行えるロボット技術の確立を目指して， 内視鏡下手術におけるカメラと鉗子の助手をマニピュレータが担えるよう，医工・産学連携で取り組んでいます． 医師のハイエンドツールであるオールインワンシステムのリモート(遠隔)操作型ロボットに対して， アシスタントツールであるローカル操作型ロボットLODEM(Locally Operated Detachable Endo-effector Manipulator)群は， センシング能力に優れる人と，安定した作業に優れるロボットが補完しあう，インテグレーションです．
研究背景
外科手術では排泄など機能の温存や合併症を回避するため，神経や筋肉および正常組織をできる限り残す微細作業が重要です．内視鏡下手術は低侵襲（短い時間でかつ患部以外の正常な組織にできるだけ損傷を与えない）かつ拡大視野を得られるため，開腹開胸手術と比べて微細作業に優れていることから広く行われるようになってきています．この手術は，患者にとって創痕が小さいため整容的に優れ，身体への負担が軽く，社会復帰も早期に可能です．
しかし，外科医にとっては外径3～12mmで長さ300mmの長軸形状の術具を用いて，術具をガイドするトロカー刺入点を中心としたピボット運動による高度な手技を要求されます．すなわち，執刀医は開腹開胸手術に比べて直感的ではない操作で，自由度が少なく力覚が鈍い術具を扱い，手の振戦を抑え，さらに，内視鏡で視野を提供する助手や，鉗子で臓器を把持牽引する助手と協調する必要があります．
目的
これら内視鏡下手術の課題を解決すべく，執刀医のスキル向上を目指した様々なトレーニング機器が開発される一方で，ロボット技術を適用した手術支援システムへの要求が高まっています．近年，多自由度の専用術具を備える複数本のアームをマスタスレーブ制御し，手ブレ補正やモーションスケーリングと合わせて， 高精度の位置決め可能な手術支援ロボットが国内外で開発されています．これらは医師が患者から離れた場所で操作するリモート操作型です．医師のハイエンドツールとして，先進諸国で臨床利用されています．
一方，患部周辺の状況を的確に把握して手技を進めることが外科手術では重要なことから，医師とロボットが清潔野で協同してスムーズな視野展開と正確な手術手技を行える内視鏡下ソロサージェリーの実現を目指し，LODEMを中心としたローカル操作型マニピュレータシステムの研究開発を進めています．外科医が少ない病院や，途上国での利用を視野に入れています．
小型の術具マニピュレータ
術具マニピュレータの研究は，執刀医と共存協調して手術を行う第3の手に注目しています．ピボット運動の3自由度以上を備え直感的に理解できる新しい機構を考案して，臓器を牽引する作用力，速度，精度，動作範囲を考慮した設計を経て試作し，素早い術野展開できるマニュアル駆動と，臓器の牽引を維持できるモータ駆動を併用する，小型軽量で安全なマニピュレータの研究に取り組んでいます．
ローカル操作インタフェース
操作インタフェースの研究は，患者の傍で手術をする医師（ヒト）の動きに注目しています．術具を持つ手，踏ん張る脚，モニタを見る頭，などの動作を対象にヒトの動作を解析して，非拘束なデバイスで単純かつ直感的に動作をセンシングし，指先スイッチや脚動作のオンオフ制御，異構造マスタスレーブ制御，ミドルウェアを介したマスタとスレーブのマルチ接続など，術具マニピュレータをストレスなくローカル操作するインタフェースの研究に取り組んでいます．
内視鏡映像下での臓器形状や術具の画像認識
画像認識の研究は，手術で注視するモニタ内の内視鏡映像に注目しています．臓器を牽引（カウンタートラクション）して緊張状態となった組織の形状を認識し，鉗子やトロカーなど術具を検出して，これらを指標に執刀医のタイミングで視野を変える，内視鏡ロボットを半自動制御する研究に取り組んでいます．
効果
本提案手術は，清潔野の医師が患者の容態変化など緊急時の対応ができる安心安全な手技です．これにより，通常の内視鏡下手術であれば，患者は住む場所によらず地元の病院で施術を受けることができます．また，手術スタッフの省力化に伴い，外科医は労働時間を短縮でき，診察時間の確保に繋がれば患者にも恩恵があります．さらに，病院および国は手術に要する人件費を抑制できます．なお，難しい手術や研修医の教育は，これまでどおり大学病院などでスタッフを十分に配置して，遠隔操作型の手術支援ロボットなど最新機器を用いて行います．
診断機器に比べて治療機器は輸入超過であり，医療の安全保障のためにも，メイドインジャパン製品が望まれます．近接操作型のロボットデバイス群を統合する安心安全なロボット支援ソロサージェリーを構築し，医師不足の発展途上国へ輸出できれば，国際的な医療格差の縮小も期待できると考えています．
共同研究の先生方
国立がん研究センター東病院大腸外科 西澤先生，伊藤先生
京都大学大学院医学研究科 中村先生
大阪大学大学院基礎工学研究科 西川先生
信州大学学術研究院繊維学系 岩本先生
東京女子医科大学先端生命医科学研究所 正宗先生，堀瀬先生
研究シーズ・教員に対しての問合せや相談事項はこちら
技術相談申込フォーム