Anthropic CEO 다리오 아모데이(Dario Amodei)는 AI 에이전트의 급속한 발전이 6~12개월 내 인터넷 장악 및 수백억 달러의 피해를 초래할 수 있다고 경고하며, AI 개발 속도 조절과 정부 규제의 필요성을 강조했습니다. 동시에 Nunchux AI는 비디오 Diffusion Transformers (DiTs)의 핵심 연산 병목을 해결하는 VC-Attention 커널을 공개하며 AI 효율성 개선 방안을 제시했습니다.
핵심 기술 사양 및 성능 비교
Nunchux AI의 VC-Attention은 비디오 DiTs를 위한 트레이닝 없는 저비트 어텐션 커널로, 기존 어텐션 메커니즘의 성능 저하 요인을 해결합니다.
- 어텐션 처리 비중: 5초 길이 720p Wan2.2-14B 클립 기준, RTX 5090에서 어텐션이 생성 시간의 64% 이상을 차지하며, B200에서 디노이징 단계의 약 2/3에 해당.
- 값(Value) 항 오류: Wan2.2 모델에서 출력 오류의 82%가 값 항에서 발생.
- Softmax 병목: B200 및 H200에서 FP32 Softmax가 최장 파이프라인 단계 구성.
- VC-Attention 개선:
- V-Smooth: 값 특이점 처리를 위해 온라인 k-means 및 디민 방식 사용. 잔차는 E4M3 (8비트) 또는 NVFP4 (4비트)로 양자화. 블록 에너지 8%~36% 제거, 각 값 요소당 0.125비트 비용, 그루핑은 어텐션 시간의 3~4% 차지.
- ExpCast-FP8: Softmax 병목 해소.
산업 및 비즈니스 파급 효과
Nunchux AI의 VC-Attention 기술은 비디오 DiTs의 연산 효율성을 높여 고품질 비디오 생성 AI의 개발 및 운영 비용을 절감, 미디어 및 콘텐츠 제작 산업의 AI 솔루션 도입을 가속화할 잠재력을 가집니다. 동시에 Anthropic의 사라 헥(Sarah Heck) 정책 책임자는 AI 기업의 자체 규제 한계를 지적하며 정부 규제 및 제3자 평가 시스템 도입을 강조했습니다. 이는 FRONTIER Act와 같은 입법 논의와 연계되며, OpenAI 역시 핵심 조항을 지지하는 등 AI 산업 전반에서 안전 및 거버넌스 프레임워크 구축에 대한 합의가 형성되고 있음을 시사합니다. 다리오 아모데이 CEO의 수백억 달러 규모의 피해 경고는 기술 발전과 함께 증대하는 경제적 위험을 반영하며, 외부 감독을 통한 균형점 모색이 중요한 과제로 부상하고 있음을 보여줍니다.