재영의 기술 블로그
홈 아카이브 소개 게임

"infiniband" 태그가 달린 포스트

January 24, 2026 undefined분 읽기

분산 LLM 학습 07 - NCCL과 토폴로지: 왜 같은 GPU 수인데 속도가 다를까

분산 학습 성능은 GPU 개수보다 GPU들이 어떤 링크로 연결되어 있는지에 더 크게 흔들릴 때가 많다

Lectures
더 읽기

© 2025 Jae · Notes on systems, software, and building things carefully.

RSS