원격 Mac에서 LLM 가중치나 국경을 넘는 데이터셋을 받을 때 병목은 크로스 리전 RTT, 단일 TCP 처리량, 동시 연결 수, APFS 쓰기·메타데이터 부하에 자주 걸립니다. 여기에 소스 레이트 리밋·회사 출구 정책·야간 배치 경합이 겹칩니다. 본문은 일본·한국·홍콩·싱가포르와 미국 서부를 비교한 가정 표, aria2·curl 시작값, TMPDIR·여유 공간, IO 점검 목록을 정리했습니다. 관련 흐름은 홈, 노트 목록, 크로스 리전·배치·비용 글과 이어집니다.
이 매트릭스의 대상
모델 레지스트리·데이터 레이크가 리전별로 흩어진 팀, MLOps·연구에서 수백 GB 단일 파일과 다중 샤드를 동시에 당겨야 하는 경우에 맞춰 작성했습니다. 소스의 실제 POP·버킷 리전을 먼저 확인한 뒤, 아래 표는 mtr·단일 연결 시험으로 교정해야 하는 출발 가정입니다.
세 가지 숨은 병목
- 지연이 처리량을 지배: RTT가 크면 단일 연결로 대역을 못 채우고, 무작정 연결만 늘리면 반개방·재전송이 늘어납니다.
- 임시 디렉터리와 APFS: 고분할 aria2가 시스템 APFS와 같은 컨테이너에 쌓이면 병합 구간에서 랜덤 쓰기·공간 부족이 한꺼번에 터집니다.
- 쿼터·거버넌스: 서버당 연결 상한·Egress 단가·데이터 상주 리전 계약이 스크립트 파라미터보다 먼저일 수 있습니다.
일·한·홍콩·싱가포르 대 미서부: 지연·대역 가정과 aria2·curl
아태 CDN·엣지에 가까운 소스는 홍콩·일본·한국·싱가포르 쪽 워커가 유리한 경우가 많고, us-west-2 등 미서부 오브젝트 스토리지·컨테이너 레지스트리에 붙어 있으면 미서부 Mac이 왕복을 줄입니다. 수백 GB 단일 파일은 피크 다운로드보다 병합·검증 단계가 디스크에 더 민감합니다.
| 워커 리전 | 전형 RTT(가정) | 단일 연결 대역(가정) | aria2 시작 | curl 방향 | 임시 디렉터리 | APFS 여유 임계 |
|---|---|---|---|---|---|---|
| 홍콩 | 대만·동남아 상대적으로 낮음 | 약 50–200 Mbps | -x8 -s8 --min-split-size=20M | 다중 파일 xargs -P4 | /Volumes/Scratch/tmp 권장 | 작업≥용량×1.2, 시스템 볼륨≥15% |
| 일본 | 동아시아 상호 중간 | 약 80–300 Mbps | -x12 -s12 --min-split-size=32M | 디렉터리 병렬 4–8 | 시스템과 분리된 볼륨 | 병합 전≥20% 여유 권장 |
| 한국 | 일본과 유사 | 약 80–300 Mbps | -x10 -s10 --min-split-size=32M | --limit-rate로 출구 보호 | 시스템 APFS와 동일 컨테이너 지양 | 피크 쓰기 시≥18% |
| 싱가포르 | 동남아 허브 | 약 100–400 Mbps | -x16 -s16 --min-split-size=64M | 대용량 소수 병렬 | NVMe 외장·서브볼륨 | 고분할 시≥20% |
| 미국 서부 | 대양 횡단 150–220 ms대 | 단일 연결은 낮고 합산은 높을 수 있음 | -x24 -s24 --min-split-size=64M | 다파일·저병렬이 더 안정적인 경우가 많음 | 모델 캐시와 동일 디스크는 IO 경합 주의 | 장시간 전송·병합≥25% 버퍼 권장 |
디스크 IO·쿼터 파라미터 체크리스트
- 연결 상한: max-connection-per-server는 소스·방화벽·프록시 한도와 교집합; 실패 시 지수 백오프.
- 분할 크기: 너무 작으면 메타데이터·fsync 부담, 너무 크면 패킷 손실 시 구간 재시도 비용이 큼. min-split-size를 한 단계씩 조정.
- 원자적 낙관: 해시 확인 후 mv; Xcode DerivedData 등과 동일 디스크에서 IO 경쟁 피하기.
- 관측: 활성 상태 모니터의 디스크, diskutil apfs list; 야간 큐·스로틀은 배치·리전 글의 큐 설계와 함께 보기.
- curl 8+: 단일 대용량에 --parallel --parallel-max 4를 쓸 때도 총 처리량이 출구 SLA 아래인지 확인.
실행 순서(6단계)
- 1–5 GB 단일 연결 시험으로 평균 MB/s·타임아웃 패턴을 기록합니다.
- 소스가 아태 엣지면 홍콩·일·한·싱 후보, 미서부 버킷이면 미서부 워커를 우선 비교합니다.
- export TMPDIR=/Volumes/Scratch/tmp처럼 별도 APFS 볼륨을 쓰고, 시스템 볼륨에는 고분할 임시를 두지 않습니다.
- aria2는 표의 절반부터 올리며 단계적으로 키웁니다. curl은 프로세스 병렬 수를 -P로 상한합니다.
- 배치를 끊어 실행해 APFS의 순간 쓰기 피크를 나눕니다.
- 연결 수·평균 속도·남은 용량을 로그로 남겨 다음 작업의 기준선으로 씁니다.
컨테이너형 에이전트 배포와 병행할 때는 OpenClaw·Docker·원격 Mac 워크플로의 네트워크·볼륨 패턴을 참고하세요.
인용·내부 기준으로 쓰기 좋은 문장
- 공간: 가용≥파일×1.2, 시스템 APFS≥15%는 병합 실패 방지용 하한; 미서부 장거리는 추가 5% 버퍼를 권장.
- 대양 구간: 높은 split·서버당 연결이 RTT를 보완하지만, 소스 정책이 하드 캡일 수 있음.
- 비용 구성: 기시간·크로스보더 egress·스냅샷 디스크·재시도 시간이 동일 선상에서 잡혀야 함.