트랜스포머의 한계가 드러나다: 스타트업들이 LLM의 차세대 혁신을 추구하고, AI 학계 연구는 새로운 현실에 직면하다

이 뉴스레터의 주요 기사는 9년 전 구글이 도입한 트랜스포머가 값비싼 밀집 어텐션 메커니즘과 대규모 정보 처리 능력 부족으로 인해 LLM의 병목 현상이 되고 있다는 내용을 다룹니다. LLM을 더 빠르고 효율적이며 똑똑하게 만들 수 있는 네 가지 새로운 혁신적 접근법이 강조됩니다. 또 다른 기사는 AI2050 프로그램의 모임에 대해 보도하는데, 대부분이 대학 연구자들인 AI 교수들이 학계 연구의 새로운 현실을 협상하고 있습니다. 엔비디아는 블랙록, 골드만삭스 및 다른 4개사와의 거래를 통해 월스트리트에서 5000억 달러를 확보하여 AI 인프라에 투자했습니다. 마크 저커버그의 새로운 선언문은 미국을 구하기 위해 오픈소스 AI를 지지하며, 버니 샌더스는 AI 개발 중단을 요구했습니다. 미국 법원은 수천 건의 소셜 미디어 소송이 중독성 메커니즘에 대해 진행될 수 있도록 허용할 것입니다. 유니트리의 IPO는 대규모로 초과 청약되었으며, 플록의 자동차 추적 카메라는 반발에 직면했습니다. 중국은 감정적 상호작용 AI에 대한 규칙을 도입했고, 한 AI 도구는 과학 논문의 상위 1%를 선별한다고 주장하며, 82세 노인은 데이터 센터를 위해 2600만 달러의 제안을 거절했습니다. 뉴스레터에는 또한 유전자 배아 검사의 윤리적 문제에 대한 특집 기사가 포함되어 있습니다.