Google, Titans 출시: 바이오닉 디자인으로 토큰 컨텍스트 길이 200만 개 돌파 - AI 기사
Google Research는 최근 혁신적인 "Titans" 시리즈 모델 아키텍처를 출시하여 생체 공학 설계를 통해 획기적인 200만 개의 토큰 컨텍스트 길이를 달성했으며 향후 관련 기술을 오픈 소스로 계획하고 있습니다. 이 아키텍처의 핵심 혁신은 인간의 메모리 시스템에서 영감을 받아 디자인된 심층 신경 장기 메모리 모듈을 도입한 것입니다. 타이탄은 교묘하게 결합되었습니다.
2025-01-26