نظرة نموذج لغوي كبير على حديقتي: كيف يقرر الذكاء الاصطناعي المرئي استدعائي لتغطية الأثاث قبل المطر

قام المؤلف بتنفيذ أتمتة في المنزل الذكي القائم على Home Assistant (HA)، تستخدم نموذج لغة كبير متعدد الوسائط للتحقق مما إذا كان الأثاث الخارجي مغطى قبل هطول المطر. يراقب النظام توقعات هطول الأمطار والتنبؤات اللحظية، وعند اقتراب المطر، يقوم بتشغيل إضاءة الكاميرا، ويلتقط صورة، ويرسلها إلى النموذج اللغوي عبر تكامل AI Task القياسي. يعيد النموذج اللغوي استجابة منظمة (covered/reason)، وإذا كان الأثاث مكشوفًا، يتم إرسال إشعار إلى Telegram مع الصورة والرادار وأزرار مضمنة "غطيته" و"تأجيل 3 ساعات". تستخدم الأتمتة فقط الآليات القياسية في HA: الأتمتة، والمساعدات، وAI Task وبوت Telegram، دون أي تكاملات مخصصة. تتضمن الشروط مهلة تبريد (الفحص مرة واحدة على الأكثر كل 3 ساعات) ووظيفة تأجيل (زر التأجيل). عند حدوث خطأ في النموذج اللغوي، يتدهور النظام بلطف، ويرسل إشعارًا بفحص يدوي. يعمل النظام بأكمله على Raspberry Pi 3 بموارد محدودة، مما يتطلب تحسين استدعاءات النموذج.