インタラクティブ応用向け超高速超低遅延映像センシングシステム
【研究キーワード】
映像認識 / 超高速超低遅延システム / FPGA / ハードウェアアーキテクチャ / FA検査 / マンマシンI/F / 深層学習 / 映像センシング / 映像認識システム / FPGAアーキテクチャ / 実時間画像処理
【研究成果の概要】
インタラクティブ応用のための次世代映像センシングのコアとなる、超高速(1000fps)、超低遅延(1から2ミリ秒)映像認識システム実現のための基盤技術創出を行うことを目的として、様々な映像センシングシステム実現の鍵となる、画像の特徴を用いたマッチング、追跡、分類の3つの基本処理に対し、実環境下で高い精度が得られる超高速・超低遅延向き映像認識アルゴリズム構成法とそれに基づくハードウェアアーキテクチャの実現を目指した取り組みを行なった。マッチング処理に関しては、フォアグランド検出やハフ変換を用いた直線検出に関して、局所時空間伝搬やパラメーター空間を部分圧縮した独自手法などに基づく超低遅延向けのアルゴリズムとFPGA上のハードウェアアーキテクチャを考案し、デモシステムを実装した結果、784fpsの超高速、1ms以下の超低遅延で処理可能なことを実証した。追跡処理に関しては、LK法に基づく、サブピクセルレベルの追跡を可能とする手法を検討した。分類処理に関しては、両手を追跡システムや果物を対象とした欠陥検出システムに対し、いずれも深層学習を用いた高精度化つ超低遅延処理を可能とするアルゴリズムを考案し、973fpsの超高速処理が可能な事を確認した。さらに将来の応用を睨んだ関連技術として、深層学習手法に基づくHDR (High Dynamic Range Imaging)やバレーボールを対象としたボール追跡技術などに関する検討を行なった。以上の関連成果を5件の原著学術論文、および5件の国際会議にて発信した。また、関連企業との技術交流を積極的に行い、今後、これらの技術を産業につなげていく上で重要となる方向性に関して多くの知見を得た。
【研究代表者】
【研究種目】基盤研究(C)
【研究期間】2021-04-01 - 2024-03-31
【配分額】4,160千円 (直接経費: 3,200千円、間接経費: 960千円)