YOLO を使用したリアルタイムの車両検出

これは、Udacity 自動運転車ナノディグリー プログラムのプロジェクトです。 このプロジェクトの目的は、ダッシュ カメラのビデオで車両を検出することです。 You Only Look Once (YOLO) を使用してダッシュ カメラのビデオ ストリームから車両を検出し、ほぼリアルタイム (35FPS) の処理を​​実現できます。

プロジェクトのコードは次のとおりです。最終的なビデオ出力はこちらです。オブジェクト検出の概要ビデオ ストリーム内の車両の検出は、オブジェクト検出の問題です。 オブジェクト検出の問題は、分類問題または回帰問題としてアプローチできます。

分類アプローチでは、画像は小さなパッチに分割され、パッチ内にオブジェクトがあるかどうかを判断するために、各パッチが分類器を通過します。 境界ボックスは、分類結果が正のパッチに割り当てられます。 回帰アプローチでは、画像全体が畳み込みニューラル ネットワークを介して直接実行され、画像内のオブジェクトの 1 つ以上の境界ボックスが生成されます。

このプロジェクトでは、Keras で tiny-YOLO のバージョン 1 を実装します。これは、実装が簡単で、かなり高速であるためです。tiny-YOLO v1 オブジェクト検出の YOLO アプローチは、次の 2 つの部分で構成されています。画像からのベクトル、およびベクトルをボックス座標とクラス確率として補間する後処理部分。 ニューラル ネットワークの場合、小さな YOLO v1 は 9 つの畳み込み層と 3 つの全結合層で構成されています。

各畳み込み層は、畳み込み、リーキー relu、最大プーリング操作で構成されます。 最初の 9 つの畳み込み層は特徴抽出器として理解できますが、最後の 3 つの全結合層はバウンディング ボックスを予測する回帰ヘッドとして理解できます。 モデルには合計 45,089,374 個のパラメーターがあります。

このネットワークの出力は、予測されたバウンディング ボックスの情報を含む 1470 ベクトルです。 情報は次のように編成されます。1470 ベクトル出力は 3 つの部分に分割され、確率、信頼度、ボックス座標が得られます。 これらの 3 つの部分のそれぞれは、元の画像を形成する 49 個のセルでの予測に対応して、さらに 49 個の小さな領域に分割されます。

後処理ステップでは、ネットワークからこの 1470 ベクトル出力を取得して、特定のしきい値よりも高い確率でボックスを生成します。YOLO ネットワークのトレーニングには非常に時間がかかります。 ここからの事前トレーニング済みの重み (172M) を使用して、Keras モデルにロードします。

結果以下は、いくつかのテスト画像の結果を示しています。 車が正しく検出されていることがわかります。これは、同じパイプラインをビデオに適用した結果です。 モデルの真のパフォーマンスを確認するために、各フレームは個別に処理され、一時的な平滑化は適用されません。

誤検知は 1 つだけで、検出はかなり正確であることがわかります。YOLO は高速であることが知られています。 このプロジェクトでは、ビデオは Nvidia 1080Ti GPU で処理され、バッチ処理なしで 35FPS を達成できます。

謝辞 YOLO に関する有益な議論をしてくれた allanzelener と Trieu に感謝します。 Calvenn Tsuu のパフォーマンス テストに感謝します。

レッドモン、S。 Divvala、R。 ガーシック、およびA。

Farhadi、You Only Look Once: 統合されたリアルタイムのオブジェクト検出、arXiv:1506。 02640 (2015). J.

レッドモンとA。 Farhadi, YOLO9000: より良く、より速く、より強く、arXiv:1612.08242 (2016).

darkflow、関連する質問 北インドで生物医学工学のキャリアや可能性はありますか? OPは特定のことを指定しておらず、OPはIndia.nから表示されているため、北インドであると仮定して質問を編集し、Careerのスペルも修正しました。

北インドでの生物医学工学のキャリアまたは範囲。 n私は北部出身で、そこで生物医学工学を経験しました。同じキャリアの選択肢は何ですか: 生物医学工学の仕事は、デリー NCR、チャンディーガル、および北部の他の重要なティア 2 都市の病院で利用できます。 それとは別に、デリー NCR にはバイオメディカル エンジニアリングの企業が n 件あります。

デリーは、インドで最大の手術器具会社の 1 つを保有しています。 これらの企業は、医療機器の製造と取引を行っています。 それとは別に、アプリケーションスペシャリスト、サービスおよびセールスエンジニアなど、さまざまなプロファイルのエンジニアを雇用する多くの企業があります。

デリー NCR にいる私の友人のほとんどは、良い地位にあり、キャリアの中で順調に成長しています。 賢明な研究: 生物医学工学センター、AIIMS および IIT デリーは、国内で最も先進的な生物医学工学研究センターの 1 つです。 彼らはまた、スタンフォード・インディア・バイオデザインのためにスタンフォードと協力していますnこれとは別に、グルガオンには国立脳研究センターがあり、生物医学で素晴らしい研究を行っていますデリーのDRDOラボは生物医学工学で多くの仕事をしていますnDTUには生物医学工学で働く研究者もいますnチャンディーガルにはCSIO、CSIRがありますITBHUで提供される修士レベルのコースとしての生物医学工学は、研究に強みを持つNIT Jalandharとともに生物医学研究も提供しています.IIITアラハバドもNITアラハバドと一緒に良い機会を持っています.今後数年間で、北インドだけでなくインド全体で生物医学工学の範囲が広がります。

医療機器研究への外国からの投資は増加傾向にあるため、希望を失わないでください。基本に集中してください。順調に進んでいます。 .北インドで生物医学工学のキャリアや可能性はありますか?

北インドでの生物医学工学のキャリアまたは範囲はありますか?