무슨 일이 있었나

지난 몇 년 동안 AI 인프라 경쟁은 가속 컴퓨팅의 필수 요소에 가까운 고대역폭 메모리(HBM)를 중심으로 전개되어 왔다.

모델 크기, 컨텍스트 창, 추론 워크로드가 계속 증가함에 따라 업계의 초점은 단순히 메모리를 더 많이 적층하는 것에서 메모리와 컴퓨트 간 데이터 이동을 더 효율적으로 하는 쪽으로 이동하고 있다.

퀄컴의 HBC 진출은 이제 삼성과 SK하이닉스를 기존 HBM 영역을 넘어서는 새로운 경쟁으로 끌어들이고 있다.

왜 중요한가

실제 병목 현상이 메모리 밀도가 아니라 데이터 이동이라면, 패키징, 인터커넥트, 메모리-컴퓨트 통합에서의 리더십이 적층 메모리 레이어 수를 최대화하는 것보다 더 가치 있어질 수 있다.

퀄컴의 진입은 설계 우선순위의 변화를 시사하며, 주로 HBM 사양으로 경쟁해 온 메모리 공급업체들 간의 경쟁 구도를 뒤엎을 수 있다.

주요 사실

AI 인프라 경쟁은 HBM을 가속 컴퓨팅의 필수 구성 요소로 여겨 왔다.

확장되는 모델 크기, 컨텍스트 창, 추론 워크로드가 병목 현상을 이동시키고 있다.

병목 현상은 메모리를 얼마나 적층하는지에서 메모리와 컴퓨트 간 데이터가 얼마나 효율적으로 이동하는지로 옮겨가고 있다.

퀄컴의 HBC 전략은 삼성과 SK하이닉스를 HBM을 넘어서는 경쟁으로 끌어들이고 있다.

다음에 주목할 점

메모리 제조사들이 퀄컴의 HBC 이니셔티브에 대응하여 데이터 이동 효율성을 강조하는 방향으로 로드맵을 전환하는지 주목하자.

다른 칩 제조사나 메모리 공급업체가 유사한 노력을 발표하는지 지켜보라. 이는 HBM 중심 접근법에서 벗어나는 더 광범위한 업계 변화를 시사할 것이다.

출처