كشف المركبات في الوقت الحقيقي باستخدام YOLO

هذا مشروع لبرنامج Udacity لسيارة Nanodegree ذاتية القيادة. الهدف من هذا المشروع هو اكتشاف المركبات في فيديو كاميرا لوحة القيادة. نحن نستخدم You Only Look One (YOLO) لاكتشاف المركبات من دفق فيديو كاميرا لوحة القيادة ، ويمكننا تحقيق معالجة في الوقت الفعلي تقريبًا (35 إطارًا في الثانية).

الكود الخاص بالمشروع هو إخراج الفيديو النهائي هنا. مقدمة عن اكتشاف الكائنات يعد اكتشاف المركبات في دفق الفيديو مشكلة في اكتشاف الكائن. يمكن التعامل مع مشكلة اكتشاف الكائن على أنها مشكلة تصنيف أو مشكلة انحدار.

في نهج التصنيف ، يتم تقسيم الصورة إلى رقع صغيرة ، يتم تشغيل كل منها من خلال مصنف لتحديد ما إذا كانت هناك كائنات في التصحيح. سيتم تخصيص المربعات المحيطة للتصحيحات ذات نتائج التصنيف الإيجابية. في نهج الانحدار ، سيتم تشغيل الصورة بأكملها من خلال شبكة عصبية تلافيفية مباشرة لإنشاء واحد أو أكثر من الصناديق المحيطة للكائنات في الصور.

في هذا المشروع ، سنقوم بتنفيذ الإصدار 1 من mini-YOLO في Keras ، لأنه سهل التنفيذ وسريع بشكل معقول. متجه من صورة ، وجزء المعالجة اللاحقة الذي يقحم المتجه كإحداثيات مربعات واحتمالات الفئة. بالنسبة للشبكة العصبية ، يتكون YOLO v1 الصغير من 9 طبقات التفاف و 3 طبقات متصلة بالكامل.

تتكون كل طبقة التفاف من عمليات الالتواء ، وإعادة التسريب ، وعمليات التجميع القصوى. يمكن فهم طبقات الالتفاف التسعة الأولى على أنها مستخرج السمات ، في حين يمكن فهم الطبقات الثلاث الأخيرة المتصلة بالكامل على أنها رأس الانحدار الذي يتنبأ بالمربعات المحيطة. يوجد إجمالي 45،089،374 معلمة في النموذج.

ناتج هذه الشبكة هو متجه 1470 ، والذي يحتوي على المعلومات الخاصة بالمربعات المحيطة المتوقعة. تم تنظيم المعلومات بالطريقة التالية يتم تقسيم إخراج المتجه 1470 إلى ثلاثة أجزاء ، مع إعطاء الاحتمالية والثقة وإحداثيات الصندوق. ينقسم كل جزء من هذه الأجزاء الثلاثة أيضًا إلى 49 منطقة صغيرة ، بما يتوافق مع التوقعات في 49 خلية تشكل الصورة الأصلية.

في خطوات المعالجة اللاحقة ، نأخذ هذا المتجه 1470 الناتج من الشبكة لإنشاء المربعات التي لها احتمالية أعلى من عتبة معينة. يستغرق تدريب شبكة YOLO وقتًا طويلاً للغاية. نستخدم الأوزان مسبقة الصنع من هنا (172 م) ونقوم بتحميلها في نموذج Keras الخاص بنا.

النتائج: فيما يلي نتائج عدة صور اختبار. يمكننا أن نرى أن السيارات تم الكشف عنها بشكل صحيح: ها هي نتيجة تطبيق نفس خط الأنابيب على مقطع فيديو. من أجل رؤية الأداء الحقيقي للنموذج ، تتم معالجة كل إطار بشكل مستقل ولا يتم تطبيق أي تجانس زمني.

نرى أن الاكتشاف دقيق إلى حد ما ، مع وجود إيجابي خاطئ واحد فقط ، ومن المعروف أن YOLO سريع. في هذا المشروع ، تتم معالجة الفيديو على Nvidia 1080Ti GPU ويمكنه تحقيق 35 إطارًا في الثانية بدون معالجة مجمعة.

شكر وتقدير لـ allanzelener و Trieu لمناقشتهم المفيدة على YOLO. بفضل Calvenn Tsuu لاختبار الأداء.

ريدمون ، س. Divvala ، R. Girshick ، و A.

فرهادي ، أنت تنظر مرة واحدة فقط: اكتشاف الأشياء في الوقت الفعلي الموحد ، arXiv: 1506. 02640 (2015). J.

ريدمون و أ. فرهادي ، YOLO9000: أفضل ، أسرع ، أقوى ، arXiv: 1612.08242 (2016).

darkflow ، سؤال ذو صلة هل هناك أي مهنة أو مجال للهندسة الطبية الحيوية في شمال الهند؟ نظرًا لأن OP لم يحدد أي شيء معين وكما يظهر OP من India.n لقد افترضت وعدلت السؤال لأقول أن شمال الهند ، وصححت تهجئة Career أيضًا.

مهنة أو مجال الهندسة الطبية الحيوية في شمال الهند. أنا من الشمال ولدي خبرة في الهندسة الطبية الحيوية هناك ، فما هي الخيارات المتاحة أمامك للحصول على وظيفة حكيمة: وظائف الهندسة الطبية الحيوية متاحة في المستشفيات في دلهي إن سي آر ، شانديغار بالإضافة إلى مدن أخرى مهمة من المستوى 2 في الشمال. بصرف النظر عن ذلك ، هناك عدد لا بأس به من الشركات في دلهي إن سي آر للهندسة الطبية الحيوية.

تمتلك دلهي واحدة من أكبر شركات الأدوات الجراحية في الهند. تقوم هذه الشركات بتصنيع وتجارة المعدات الطبية. بصرف النظر عن ذلك ، هناك العديد من الشركات التي توظف مهندسين لمحات مختلفة مثل متخصصي التطبيقات ومهندس الخدمة والمبيعات.

يتمتع معظم أصدقائي في دلهي- NCR بمكانة جيدة وينمون بشكل لائق في حياتهم المهنية. البحث الحكيم: مركز الهندسة الطبية الحيوية ، AIIMS و IIT دلهي هو واحد من أكثر مراكز البحوث تقدمًا في الهندسة الطبية الحيوية في البلاد. لديهم أيضًا تعاون مع Stanford for Stanford India Biodesignn بصرف النظر عن هذا ، لدينا المركز القومي لأبحاث الدماغ في جورجاون ، ونقوم بإجراء بحث مذهل في مختبر BiomedicalnDRDO في دلهي ، ويقوم بالكثير من العمل في الهندسة الطبية الحيوية. تقدم المختبرات التي تحتوي على مرافق رئيسية للبحوث الطبية الحيوية nIIT Ropar أيضًا الأبحاث الطبية الحيوية جنبًا إلى جنب مع NIT Jalandhar التي لها معقل في ResearchnBiomedical Engineering كدورة على مستوى الماجستير تقدم في ITBHU كما توفر فرصًا بحثية جيدة ، كما أن معهد IIIT alahabad لديه أيضًا فرصًا جيدة جنبًا إلى جنب مع NIT Allahabadnn. الكثير من المجالات في الهندسة الطبية الحيوية في السنوات القادمة ليس فقط شمال الهند ولكن في جميع أنحاء الهند.

تتزايد الاستثمارات الأجنبية في أبحاث الأجهزة الطبية مثل أي شيء آخر ، لذا لا تفقد الأمل ، ركز على الأساسيات الخاصة بك ، نحن على ROLL. هل هناك أي مهنة أو مجال للهندسة الطبية الحيوية في شمال الهند؟

هل لديهم أي مهنة أو مجال للهندسة الطبية الحيوية في شمال الهند؟