LLM bahçeme bakıyor: Yapay zekâ görüşü yağmurdan önce mobilyaları örtmemi söylüyor
Moonshot AI
Yazar, Home Assistant üzerinde akıllı ev otomasyonu kurdu. Bu sistem, yağmurdan önce dış kamera karesini analiz etmek için çok modlu bir LLM kullanıyor. Mobilyalar örtülmemişse, fotoğraflı ve onay butonlu bir Telegram bildirimi gönderiliyor. Sistem, yalnızca gerçek yağış tehdidi olduğunda kontrol ederek LLM çağrılarını azaltıyor.
Yazar, Home Assistant (HA) tabanlı akıllı evde, bahçe mobilyalarının yağmurdan önce örtülüp örtülmediğini kontrol etmek için multimodal bir LLM kullanan bir otomasyon gerçekleştirdi. Sistem, yağış tahminini ve nowcast'ını izler, yağmur yaklaştığında kamera aydınlatmasını açar, bir görüntü alır ve bunu standart AI Task entegrasyonu aracılığıyla LLM'ye gönderir. LLM, yapılandırılmış bir yanıt (covered/reason) döndürür ve mobilyalar açıksa, Telegram'a fotoğraf, radar ve 'Örttüm' ile '3 saat ertele' inline butonlarıyla bir bildirim gönderilir. Otomasyon yalnızca HA'nın standart mekanizmalarını kullanır: otomasyonlar, yardımcılar, AI Task ve Telegram botu; özel entegrasyonlar kullanılmaz. Koşullar arasında cooldown (saatte en fazla bir kez kontrol) ve snooze (erteleme butonu) bulunur. LLM hatası durumunda sistem, manuel kontrol için bildirim göndererek yumuşak bir şekilde geriler. Tüm sistem, model çağrılarının optimize edilmesini gerektiren sınırlı kaynaklara sahip Raspberry Pi 3 üzerinde çalışır.
Kaynak: Habr — хаб ИИ —
orijinal