Forschung RSS

Google DeepMind kombiniert Genie mit Google Street View, um reale Orte zu simulieren

Google DeepMind hat sein Allzweck-Weltmodell Genie mit Google Street View integriert, sodass Benutzer interaktive virtuelle Umgebungen auf der Grundlage realer Orte erstellen können. Die neue Street View-Verankerungsfunktion ist in Project Genie, einem experimentellen Prototypen, zunächst für Standorte in den USA verfügbar, mit Plänen für eine globale Expansion.

Google/DeepMindGoogle/DeepMind Google DeepMindGoogle DeepMind
Google DeepMind27.07 · 14:04
Forschung 🇺🇸

LLM-Architektur-Innovationen: KV-Sharing, Embeddings pro Schicht und komprimierte Aufmerksamkeit

Sebastian Raschka gibt einen Überblick über aktuelle Fortschritte bei Open-Weight-LLM-Architekturen, die sich auf die Effizienz langer Kontexte konzentrieren. Zu den wichtigsten Techniken gehören KV-Sharing über Schichten hinweg (Gemma 4), Embeddings pro Schicht (Gemma 4 E2B/E4B), schichtweise Aufmerksamkeitsbudgetierung (Laguna XS.2), komprimierte convolutional attention (ZAYA1) sowie mHC mit komprimierter Aufmerksamkeit (DeepSeek V4). Diese reduzieren die KV-Cache-Größe und den Speicherverkehr für Reasoning- und Agent-Workflows.

Google/DeepMindGoogle/DeepMind PoolsidePoolside DeepSeekDeepSeek Technology Innovation InstituteTechnology Innovation Institute
Sebastian Raschka27.07 · 13:06
Aktuelle Nachrichten