الدروس ولعبة التعلّم

معالجة الصور على كاميرا حرارية

رؤية حاسوبية حقيقية من كلمات الحساسات الخام، بلغة C على لوحة Uno بذاكرة RAM سعتها 2 KB، تنتهي بعدّاد طاقم لبوابة سفينة فضائية.

كيف يعمل

معالجة الصور على كاميرا حرارية تجري كل درس على الكاميرا الحرارية في المعرض: لوحة Arduino Uno، وحساس AMG8833 Grid-EYE على I2C يرى شبكة 8x8 من درجات الحرارة عشر مرات في الثانية، وشاشة ألوان ST7735. تُظهر قطعة الكاميرا مشهدها فوق العدسة: اضغط على مربع لتحريك البقعة الدافئة (أحد أفراد الطاقم)، واضغط عليه مرة أخرى لإزالتها، واسحب أشرطة التمرير لتغيير حرارة الغرفة وحرارة الشخص.

يفتح كل درس كودًا يعمل. تشغّله، وتقرأ ما تطبعه الشاشة التسلسلية (الإطار كأرقام، وفن نصي، وأقنعة وتسميات)، ثم تغيّر سطرًا وتشغّله مرة أخرى. تقرأ عمليات التحقق المخرج التسلسلي، فكل رقم يذكره الدرس هو رقم طبقته اللوحة فعلًا.

الدروس

  1. الصور كشبكات: أربع وستون درجة حرارة محفوظة كأرباع درجات في 128 بايت، والفهرسة مقابل الصف والعمود، وفن نصي بتمدد تباين، وتحريك فرد الطاقم، وعكس الصورة بحساب الفهارس.
  2. الاستيفاء: مزج خطي مزدوج بأعداد صحيحة من 8x8 حتى 29x29، يُرسل بكسلًا واحدًا في المرة لأن صورة الـ 1682 بايت لا تتسع، وزمن الرسم، وأقرب بكسل للتباين، وتغيير المقياس.
  3. العتبات: قناع للطاقم والخلفية، وعتبة ثابتة تفشل عندما ترتفع حرارة غرفة العزل، وعتبة تكيفية تتبع متوسط الغرفة، واختبار فرق يجد أيضًا فرد طاقم يرتدي بدلة باردة.
  4. الكتل: وسم المكوّنات المتصلة بملء تدفقي يحتفظ بمكدّسه الخاص من 64 بايت بدلًا من الاستدعاء الذاتي، وإطار اختبار بجواب معروف، و4 مقابل 8 جيران، ومرشِّح حجم للنقاط الصغيرة، وكتلة مقطوعة بحافة مجال الرؤية.
  5. الحواف: مرشِّح Sobel، ولماذا لا توجد حافة عند أسخن بكسل، ولماذا تتجاهل الحواف حرارة الغرفة، وعتبة المخطط الخارجي، وقيمة القصوى زائد نصف القيمة الدنيا كبديل رخيص للجذر التربيعي.
  6. التتبع: مطابقة مراكز الكتل مع المسارات بالمسافة، واتجاه مستنبط من الحركة، وبوابة ترفض الانتقال الآني، وصبر على من يخرج من مجال الرؤية.

التحدي الأخير: عدّاد طاقم غرفة العزل

يجمع الدرس الأخير المسار كاملًا. تنظر الكاميرا من أعلى على غرفة العزل، الفضاء يسارًا والسفينة يمينًا، وتعدّ كل مسار يعبر الخط النازل في المنتصف: دخولًا من جهة وخروجًا من الأخرى. فرد الطاقم الذي يتردد على الخط يُعدّ ثلاث مرات، فتضيف نطاقًا ميتًا (تخميدًا) ليُعدّ مرة واحدة. ثم يخبر العدّاد السفينة عندما يكون الجميع في القائمة على متنها فيمكن إغلاق الباب. وينتهي بأفكار لجعله مشروعك: خطان لممر، ومجاميع لكل اتجاه على الشاشة، أو تحذير عند بقاء أحدهم في غرفة العزل وقتًا طويلًا.

ما يفعله Uno بشكل مختلف

  • 2 KB من الذاكرة هي الميزانية كلها: المتغيرات ومخازن المكتبات والمكدّس. إطار 8x8 واحد من int16_t يساوي 128 بايت؛ وصورة 29x29 مستوفاة كانت ستبلغ 1682 بايت، لذا يبثّها المقرر بدل تخزينها.
  • لا توجد عتادات أعداد عشرية، لذا تبقى درجات الحرارة بوحدة الحساس نفسها، أرباع الدرجات، والمواضع بأجزاء من مئة من البكسل. ولا تظهر الأعداد العشرية إلا كنص ليقرأه الناس.
  • الاستدعاء الذاتي خطير على مكدّس سعته 2 KB، لذا يحتفظ الملء التدفقي بمكدّسه الصغير الخاص من البكسلات المطلوب زيارتها.
  • الشاشة هي الجزء البطيء: رسم 29x29 كاملًا يستغرق نحو ثانية، لذا تعيد الأكواد رسم ما تغيّر فقط.
  • دائرة المعرض هي Uno مع ST7735. الرقائق الأسرع ذات الذاكرة الأكبر (مثل ESP32 وشاشة ILI9341 الأكبر) تشغّل المسار نفسه مع متسع من المجال؛ والأفكار لا تتغير.
  • الكاميرا المحاكاة لا تحوي ضجيجًا بين الإطارات. حساس AMG8833 الحقيقي يتذبذب نحو درجة واحدة، وهذا هو الغرض من مرشِّح الحجم والبوابة والنطاق الميت.

بعد هذا المسار

Next is تعلّم الآلة على متحكم دقيق، حيث تصبح السمات مثل حجم الكتلة وموضعها مدخلات لنموذج، أو Fixed-point and integer math for the number tricks this course leans on.