LLMが私の庭を見守る：AIビジョンが雨の前に家具を覆うかどうかを判断する方法

著者は、Home Assistant（HA）ベースのスマートホームに、マルチモーダルLLMを使用して雨が降る前に庭の家具がカバーされているかどうかを確認する自動化を実装しました。このシステムは降水予報とナウキャストを監視し、雨が近づくとカメラの照明をオンにし、写真を撮って、標準のAI Task統合を介してLLMに送信します。LLMは構造化された応答（covered/reason）を返し、家具が露出している場合、Telegramに写真、レーダー、そして「カバー済み」と「3時間延期」のインラインボタン付きの通知が届きます。この自動化は、HAの標準メカニズム（自動化、ヘルパー、AI Task、Telegramボット）のみを使用し、独自の統合は使用しません。条件には、クールダウン（チェックは3時間に1回まで）とスヌーズ（延期ボタン）が含まれます。LLMエラーが発生した場合、システムは手動チェックの通知を送信することで穏やかに劣化します。システム全体はリソースが限られたRaspberry Pi 3で動作するため、モデル呼び出しの最適化が必要です。