대규모 언어 모델의 파라미터 수, 양자화 비트 폭, 네트워크 대역폭으로부터 다운로드 소요 시간을 추정합니다. 가중치 크기와 함께 분과 시간 단위로 표시합니다.
입력
모델
모델 파라미터 수(10억 단위). 양자화 형식과 함께 가중치 파일 크기를 결정하며, 이 크기가 실제로 전송되어야 하는 양입니다.
가중치 하나를 저장하는 데 쓰는 비트 수. 정밀도가 낮을수록 파일이 작아지므로, 같은 대역폭에서 INT4 빌드는 16비트 빌드의 4분의 1 시간에 다운로드됩니다.
네트워크
초당 메가비트(Mbps) 단위의 실효 네트워크 속도. 연결 속도는 메가비트로 표기되지만 파일 크기는 메가바이트로 표시되어 8배 차이가 나며, 이는 계산에서 반영됩니다.
결과
값을 입력하면 계산 결과가 표시됩니다.
회선을 완전히 사용한다고 가정할 때 1,000 Mbps에서 ... GB를 전송하는 데 걸리는 시간으로, 약 ...분입니다.
세부 정보
같은 전송을 시간 단위로 표현한 값으로 약 ...시간입니다. 모델이 크거나 연결이 느릴 때 유용합니다.
십진 기가바이트 단위의 가중치 파일 크기입니다. 70B 파라미터에 FP16 / BF16 (16비트)비트를 곱하고 8로 나누면 약 ... GB입니다.
모델 다운로드 시간
대규모 언어 모델을 기기로 내려받는 일은 수십에서 수백 기가바이트를 옮기는 작업일 수 있으며, 대기 시간은 두 가지에 달려 있습니다. 가중치 파일이 얼마나 큰지, 그리고 연결이 얼마나 빠른지입니다. 파일 크기는 파라미터 수와 양자화 형식에서 따라 나오고, 전송 시간은 그 크기를 네트워크 대역폭으로 나눈 값입니다. 이 계산기는 파일 크기를 직접 묻는 대신 파라미터 수와 정밀도에서 출발하여 두 단계를 하나로 이어 줍니다.
파라미터에서 바이트로, 그리고 시간으로
모델의 가중치는 대략 파라미터 수에 가중치당 비트 폭을 곱한 만큼의 바이트를 차지합니다. 파라미터 (10억 단위)과 가중치당 비트가 주어지면, 십진 기가바이트 단위의 크기는 다음과 같습니다.
S=8N⋅b
이를 전송 시간으로 바꾸려면, 대역폭이 초당 메가비트로 표기되므로 크기를 비트로 환산한 뒤 회선 속도로 나누어야 합니다. 1기가바이트는 비트이고 초당 1메가비트는 초당 비트이므로, Mbps 대역폭에서 전송은 초가 걸립니다. 분과 시간으로 표현하면 다음과 같습니다.
t=w⋅60S⋅8000,h=w⋅3600S⋅8000
계산 예시
700억 파라미터 모델을 가중치당 16비트로 저장하고 1,000 Mbps 연결로 다운로드하는 경우를 봅시다.
S=870×16=140GB,t=1000×60140×8000≈18.67minutes
회선이 포화 상태를 유지한다고 가정하면 140 GB의 가중치를 전송하는 데 약 0.31시간이 걸립니다. 같은 모델을 4비트로 양자화하면 35 GB가 되어 대략 4분의 1 시간에 다운로드됩니다.
메가비트와 메가바이트의 차이
가장 흔한 실수는 연결 속도가 메가비트이고 파일이 메가바이트라는 점을 잊는 것입니다. 1바이트는 8비트이므로 "1 Gbps" 회선은 초당 약 125메가바이트만 전송합니다. 위 계산은 이 환산을 처리하며, 그래서 기가바이트를 기가비트로 나눈 결과보다 시간이 8배 더 깁니다. 실제 다운로드는 그보다도 느린데, 서버 제한과 공유 대역폭, 프로토콜 오버헤드가 실효 속도를 광고된 최대치보다 낮게 유지하기 때문입니다. 기반이 되는 파일 크기와 정밀도에 따른 변화는 양자화 기반 모델 크기 계산기에서, 내려받은 가중치를 실제로 실행하는 데 필요한 메모리는 LLM 추론 VRAM 계산기에서 다룹니다.
자주 묻는 질문 (FAQ)
대역폭과 파일 크기를 왜 다르게 나누나요?
네트워크 속도는 초당 메가비트(Mbps)로 표기되지만 파일 크기는 메가바이트나 기가바이트로 표시되며, 1바이트는 8비트입니다. 따라서 1,000 Mbps 연결은 초당 약 125메가바이트만 전송하며 1,000메가바이트가 아닙니다. 이 계산기는 모델 크기를 비트로 환산한 뒤 대역폭으로 나누는데, 그래서 "1 Gbps" 회선이 단순 수치가 시사하는 것보다 8배 더 오래 걸립니다.
더 많이 양자화된 모델이 왜 빨리 다운로드되나요?
다운로드 시간은 파일 크기에 비례하며 양자화는 파일을 줄입니다. 가중치당 8비트로 저장한 모델은 16비트 버전의 절반 크기이고 4비트 빌드는 4분의 1 크기이므로, 같은 연결에서 각각 절반과 4분의 1 시간에 전송됩니다. 파라미터 수는 변하지 않으며, 파라미터당 바이트 수만, 따라서 전송할 총량만 줄어듭니다.
실제 다운로드는 왜 이 추정값보다 느린가요?
이 추정값은 전송 내내 연결이 광고된 최대 속도로 작동한다고 가정합니다. 실제로는 모델 호스트 서버, 공유 대역폭, 프로토콜 오버헤드, 디스크 쓰기 속도, 서버까지의 거리가 모두 실효 속도를 회선 최대치보다 낮춥니다. 결과는 최선의 경우로 보고, 명목상의 요금제 속도가 아니라 현실적인 지속 속도를 입력하면 더 가까운 수치를 얻을 수 있습니다.
면책조항
이 추정값은 전송 내내 네트워크가 입력된 대역폭으로 작동한다고 가정하며 가중치 파일만 계산합니다. 서버 제한, 공유 연결, 프로토콜 오버헤드, 그리고 토크나이저와 설정 데이터 같은 추가 파일로 인해 실제 다운로드 시간은 보통 더 깁니다.