Berkeley Artificial Intelligence Research (BAIR)

Neueste KI-Nachrichten, Modelle und Releases von Berkeley Artificial Intelligence Research (BAIR). ['GPT-4o mini', 'GRASP', 'LLM', 'PEVA', 'ResNet', 'Transitive RL (TRL)']

Offizielle Website ↗

Forschung 🇺🇸

PEVA: Ganzkörperbewegung gesteuerte egozentrische Videovorhersage

Forscher von BAIR (Berkeley AI) stellten das PEVA-Modell (Predicting Ego-centric Video from human Actions) vor, das aus vergangenen Frames und einer Sequenz menschlicher Aktionen, spezifiziert durch 3D-Posenänderungen, nächste Ich-Perspektive-Videobilder generiert. Das Modell verwendet einen autoregressiven, bedingten Diffusionstransformator, der auf dem Nymeria-Datensatz trainiert wurde, und kann atomare Aktionen vorhersagen, kontrafaktische Szenarien simulieren und lange Videogenerierung von bis zu 16 Sekunden unterstützen. PEVA kann auch zur Planung verwendet werden, indem verschiedene Aktionssequenzen basierend auf der Ähnlichkeit zu einem Zielbild bewertet werden.

Berkeley Artificial Intelligence Research (BAIR)

BAIR (Berkeley AI)27.07 · 17:05

Forschung 🇺🇸

Was lernt word2vec eigentlich? Forscher haben endlich eine exakte Trainingstheorie

Forscher des BAIR (Berkeley Artificial Intelligence Research) haben die erste vollständige quantitative Theorie des word2vec-Trainings vorgelegt. Sie bewiesen, dass das Training in praktisch relevanten Bereichen auf eine PCA-Matrixfaktorisierung (Principal Component Analysis) hinausläuft, wobei jedes gelernte Merkmal einem interpretierbaren Konzept entspricht. Die Theorie erlaubt es, alle Merkmale im Voraus basierend auf Korpusstatistiken und Algorithmus-Hyperparametern zu berechnen.

Berkeley Artificial Intelligence Research (BAIR)

BAIR (Berkeley AI)27.07 · 17:04

Mehr anzeigen ↓