トランスフォーマーは時代遅れに？新たなLLMの可能性を追求するスタートアップと、AI学術研究の新たな現実

ニュースレターのトップ記事では、9年前にGoogleが発表したトランスフォーマーが、高価な密な注意機構と大量の情報を処理できない能力のために、LLMのボトルネックになりつつあることについて論じている。LLMをより速く、より効率的に、より賢くする可能性のある4つの革新的なアプローチが紹介されている。別の記事では、AI2050プログラムの会合について報じられており、そこではAI教授たちが大学の研究者であることから、学術研究の新たな現実を交渉している。Nvidiaは、BlackRock、Goldman Sachsを含む6社との取引で、Wall Streetから5000億ドルを確保し、AIインフラに投資している。Mark Zuckerbergの新しいマニフェストは、米国を救うためにオープンソースAIを提唱しており、Bernie SandersはAI開発の一時停止を求めた。米国の裁判所は、依存性のあるメカニズムに対する何千ものソーシャルメディア訴訟の進行を許可する。UnitreeのIPOは大幅に申し込みが殺到しており、Flockの車追跡カメラは反発に直面している。中国は感情的にインタラクティブなAIのルールを導入し、AIツールは科学論文の上位1%を選ぶと主張し、82歳の人物がデータセンターのために2600万ドルを拒否した。ニュースレターには、遺伝子胚検査の倫理的問題に関する特集も含まれている。