水域環境向けのリアルタイム物体検出

背景

ある海洋テクノロジーのチームは、現場設置型の製品に知覚機能を加える必要がありました。水面および水面直下の物体を継続的に検出・追跡する必要があり、設置場所には信頼できる通信環境がなく、すべてを端末上で動作させる必要がありました。

実施内容

知覚スタックを組込みアクセラレータを中心に構築しました。対象物体向けに学習させた検出・追跡モデルを、消費電力の範囲内でリアルタイムのフレームレートを保つまで量子化・プロファイリングしました。GStreamerのパイプラインが取得、前処理、推論、オーバーレイを担い、反射光、映り込み、航跡の乱れに個別に対応しました。

成果

このシステムは、素朴な検出器が破綻するような光と水面の変化を通しても対象を捉え続け、しかもネットワーク接続を必要としません。製品の一部として出荷されました。

関与の詳細は再構成しており、数値は公開前にクライアントと確認しています。