Owli-AI Way-Buddy
カメラ画像の歩行可能領域を推定し、音で方向の手がかりを示す Android 向けの実験的デモです。
このページは機械翻訳で、現在編集レビュー前です。
注意点
実験的な歩行可能領域の推定では、障害物を見落とすことがあります。画像内の距離は、メートル単位の実際の距離ではありません。アプリは白杖や盲導犬の代わりにはなりません。引き続き自分でも周囲を確認してください。
主な機能
-
歩行可能領域の検出
カメラ画像を解析し、歩行可能と推定される領域を検出します。
-
リアルタイム方向推定
検出した歩行領域から、推奨される進行方向を計算します。
-
ステレオ音声フィードバック
左右に分かれた音で、推定された進行方向の手がかりを伝えます。
-
オンデバイス処理
画像解析はスマートフォン上で行われ、カメラ画像はサーバーに送信されません。
-
データ収集用トレーニングモード
必要に応じて画像とマスクを端末内に保存し、モデル改善用データを作成できます。
-
開発・分析モード
可視化とデバッグ情報により、モデル予測を分かりやすく確認できます。
プライバシー
動作モード: ローカル
画像処理は端末上で完結し、カメラデータは外部サーバーに送信されません。
保存したトレーニングデータはスマートフォン内に残ります。
Android に直接インストール
Google Play から直接インストールするか、PC で閲覧している場合は QR コードを読み取ってください。
スマートフォンですぐ開く
スマートフォンで QR コードを読み取り、ストアページを開いてください。
システム要件
- Android 10 以降
- カメラアクセス
詳細と使い方
Owli-AI Way-Buddy は誰のためのアプリですか
Owli-AI Way-Buddy は、屋外での歩行時に追加の方向支援を必要とする視覚障害者や失明者を対象としています。
Way-Buddy の仕組み
-
カメラを前方に向ける
スマートフォンを前方へ向け、進行方向の空間を撮影します。 -
シーンをセグメンテーションする
学習済みニューラルネットワークが歩行可能領域を検出します。 -
方向を計算する
検出された領域から推定した進行方向を導きます。 -
音でフィードバックする
ヘッドホンやスピーカーを通じて、左右差のある信号を出力します。
トレーニングモードと開発モード
Way-Buddy には、画像とマスクを端末内に保存できるトレーニングモードがあります。これらのデータはモデル改善のために利用されます。
また、開発モードではモデルの予測を画面上で可視化し、動作を理解しやすくします。
プライバシーと処理
画像処理は完全に端末上で行われます。カメラデータは外部サーバーへ送信されません。保存したトレーニングデータもスマートフォン内に保持されます。
研究との関係
Way-Buddy はアプリであると同時に、Owli-AI の 支援コンピュータビジョンとモビリティ研究領域に属する実験的デモンストレーターです。歩行者中心のシーン・アノテーションとセグメンテーションに関する研究課題は、ECCV ワークショップ論文 “Open-Vocabulary Annotation for Pedestrian Scene Understanding under Domain Shift” などで扱っています。
メディア

歩行可能な歩道のライブ検出 
直線的な歩道での方向案内 
狭い通路での経路検出 
オーバーレイ色とモデル選択の設定