سیلف ڈرائیونگ کاروں کے لیے نیورل نیٹ ورک ڈیٹا فیوژن

چینل، نیٹ ورک کسی خاص تصویر میں موجود اشیاء کو درست طریقے سے تلاش کرنے کی NN کی صلاحیت کے بارے میں اپنا حسابی اعتماد واپس کر دیتے ہیں۔ مثال کے طور پر، اگر تصویر بہت گہرا ہے، تو RGB نیٹ ورک کم اعتماد کا سکور لوٹائے گا۔ 2 DNNs (Deep Neural Networks) فیوزڈ ڈیٹاسیٹ پر بغیر نگرانی کے چلتے ہیں اور ایسی تصاویر تلاش کرتے ہیں جہاں DNN میں سے ایک کا اعتماد کم ہے اور دوسرے کا اسکور زیادہ ہے۔ اعلی اعتماد والے اسکور والی تصویر کے چینلز کو پھر کم اعتماد والے اسکور والے چینلز کے لیے NN سکھانے کے لیے استعمال کیا جاتا ہے۔ یہ عمل دونوں DNNs کو انتہائی ضروری حالات میں تربیت دے کر ان کی کارکردگی کو نمایاں طور پر بہتر بناتا ہے۔ نتائج میں سے ایک یہ ہے کہ RGB DNNs سیاہ مناظر اور براہ راست چکاچوند میں زبردست بہتری دکھاتے ہیں۔

C. فیوژن امیج (R, G, B, IR) نیٹ ورک

RGB اور IR دونوں کیمرے والے سسٹمز کے لیے بہترین کارکردگی حاصل کرنے کے لیے 4D امیجز (R, G, B, IR) استعمال کریں۔ اس DNN کا پتہ لگانے کا سکور 2 DNNs کے مجموعہ کا پتہ لگانے کا سکور ہے جو اوپر سیکشن B میں مذکور ہے، جبکہ صرف نصف کمپیوٹیشنل وسائل استعمال کرتے ہیں۔ یہ مجموعہ/فیوژن کسی ایک نظام کے لیے بہترین نتائج واپس کرے گا۔

تاہم، فیوژن نیٹ ورک اپروچ کا انتخاب کرتے وقت کچھ عوامل پر غور کرنا چاہیے۔ 2 مختلف DNNs کا استعمال کرتے ہوئے (جیسا کہ سیکشن B میں دکھایا گیا ہے)، سسٹم خود مختار گاڑیوں کی حفاظت کے لیے درکار فالتو عنصر حاصل کرتا ہے (روکنے، لینس کی گندگی، کسی ایک سینسر کی ناکامی وغیرہ کی صورت میں ناکامی کو روکنا)۔ اس کے علاوہ، بہتر RGB پلس IR نیٹ ورک کو کچھ زیادہ ہی ٹیون کیا جا سکتا ہے، اس لیے کسی ایک کیمرہ (RGB یا IR) کو ہٹانے سے باقی چینلز کے DNN پر کوئی اثر نہیں پڑے گا۔

A) RGB DNN IR DNN کو تربیت دیتا ہے۔ B) RGB DNN اور IR DNN باہمی طور پر تربیت یافتہ ہیں۔ C) 4D امیج DNN

آخر میں

RGB کیمرے ممکنہ طور پر سیلف ڈرائیونگ کاروں میں بنیادی سینسر رہیں گے۔ کچھ معاملات میں، RGB کیمرے ناقابل اعتبار ہو جاتے ہیں، جس کے لیے اضافی سینسر کے استعمال کی ضرورت ہوتی ہے۔ ایک ساتھی سینسر کا انتخاب کرتے وقت، درج ذیل نکات پر غور کیا جانا چاہیے:

ماحولیاتی حالات (روشنی، موسم، وغیرہ) کے تحت سینسر کی کارکردگی جو RGB کیمرے کی کارکردگی کو متاثر کرتی ہے۔

سینسر کی قیمت

AI الگورتھم اور مکمل ڈیٹا فیوژن کی صلاحیت کو تربیت دینے میں آسان

LWIR کیمرے اوپر دی گئی تمام باتوں کو مکمل طور پر پورا کرتے ہیں۔ QuadSight وژن سسٹم جدید ترین مصنوعی ذہانت کی صلاحیتوں کو تیزی سے اور قابل اعتماد طریقے سے مکمل ڈیٹا فیوژن حاصل کرنے کے لیے استعمال کرتا ہے تاکہ مکمل خود مختار گاڑیوں کو حقیقت بنایا جا سکے۔

RGB نظر آنے والی لائٹ امیج (بائیں)، LWIR امیج (درمیانی) اور فیوزڈ RGB-IR امیج (دائیں)