2026-04-27 임대 헤드리스 클라우드 Mac(HK / JP / KR / SG / US)에서 OpenClaw, 업스트림 LLM HTTP 429/503, 재시도 예산, 조직별 요청 형태
OpenClaw가 임대 Mac mini M4에서 SSH와 가끔 VNC로만 보이게 24시간 돌 때, 가장 시끄러운 “속도 제한” 증상은 모델 고장처럼 보입니다. 채팅 응답이 끊기고, 도구 호출이 트레이스 중간에 실패하며, 누군가 API 키가 바뀌었는지 묻습니다. 실제로 아웃바운드 LLM 제공자 경로의 HTTP 429와 HTTP 503는 nginx가 인바운드에서 스스로 내뿜는 429(웹훅 리버스 프록시)와 다른 부류이고, 이그레스·DNS·TLS 복원력 작업에서 다루는 죽은 경로와도 다릅니다. 이 2026-04-27 가이드는 SRE와 스태프 엔지니어가 우리가 할당량을 남용한 것과 상대 서비스 저하를 반복 가능하게 가르는 데 초점을 맞춥니다. 수치 백오프 기본값, 게이트웨이가 사람을 부르기 전에 넘지 말아야 할 조직별 재시도 예산, 구조적 JSON 로깅이 오늘바로 색인할 필드를 담습니다. 같은 노드에서 Xcode CI를 돌린다면 다중 Xcode·DEVELOPER_DIR 매트릭스 글과 함께 CPU·네트워크 경합을 설계하세요.
두 “429” 표면: 우리 nginx vs 상대 API 게이트
모델 대규모 릴리스, 리전 장애, 마케팅 데모 스크립트가 스킬 40개를 동시에 띄우는 날에는 다음이 섞이기 쉽습니다: (A) 의도적으로 쓰로틀한 인바운드 웹훅, (B) 업스트림 429/503, (C) 잘못된 키나 만료 자격의 401/403. 실무 트리아지: 로그의 출발 IP(프로세스의 127.0.0.1:18789 루프백 vs 퍼블릭 엣지), 제공자가 에코하는 User-Agent·라이브러리 태그, retry-after가 초 단위인지 분 단위인지. 홍콩·도쿄의 2026-04-27 운영자는 기업 프록시가 버스트를 429하는 동안 모델 벤더는 건강한 경우, 또는 그 반대를 자주 봅니다. 로그 줄마다 edge=inbound|outbound를 박으세요.
대시보드에 인바운드·아웃바운드 시계열을 한 패널에 겹치지 마세요. 스파이크 원인이 반대편 엣지인데 합산 그래프는 “전부 OpenClaw 버그”처럼 보이게 만듭니다.
HTTP 401/403 vs 429 vs 503/529: 게이트웨이가 달리 행동해야 할 때
| 상태 | 실무적 의미 | 기본 운영 자세 |
|---|---|---|
401 / 403 |
자격 증명, 허용 목록, 조직 불일치—설정이 바뀌기 전까지 대개 즉시·결정적 | 자동 재시도는 0–1회 탐침 이후 중단; 키 로테이션과 launchd 시크릿을 확인. |
429 |
제공자 측 스로틀 또는 토큰·요청 버킷 소진 | 지터 백오프; “OpenClaw 버그”로 돌리기 전에 진행 중 작업을 줄입니다. |
503 / 529(벤더별) |
과부하 또는 리전·풀 불가 | 첫 지연은 짧게, 최대 시도는 적게, 정책이 허용하면 보조 모델로 라우팅(모델 허용 목록 트리아지). |
내부 HTTP 클라이언트 설정을 정직하게 유지하세요. 401을 항상 재시도하는 순진한 루프는 제공자 측 무차별 대입 휴리스틱으로 계정 잠금으로 이어질 수 있습니다. 503에 절대 백오프하지 않는 루프는 10Gbps NIC Mac이 실제로 버틸 수 있는 병렬 스트림으로 사소한 벤더 깜빡임을 자가 DDoS로 키웁니다.
동시성, 토큰 창, 조직 단위 예산(채팅 한 방당이 아님)
대부분의 “속도 제한 당함” 티켓은 자초한 동시성입니다. launchd 작업 크론이 Discord·Slack 도구 폭주와 겹치고, 각각이 병렬 HTTP를 낳으며, 사람이 타이핑한 것보다 큰 페이로드를 밀어 넣습니다. 먼저 트래픽 형태를 고칩니다:
- 도구 사용 턴의 동시 진행을 정책에 쓸 수 있는 숫자로 캡합니다. 예: 게이트웨이 프로세스당 아웃바운드 HTTP 4개 in-flight(로컬 모델 라우팅 시 Neural Engine 오프로드를 튜닝하더라도 HTTP 경로는 캡이 필요합니다).
- 조직별 일일 토큰 상한을 비즈니스 단위(지원·마케팅·R&D)로 정하고, JSON 하나의 전역
MAX_TOKENS에만 의존하지 않습니다. - cron/launchd에서 예약 잡을 시간 이동시켜 UTC 정각에 미국·EU 근무가 싱가포르·일본 리전에서 겹치며 쌓이지 않게 합니다.
조직 간 공정성은 “누가 더 시끄러운가”가 아니라 측정 가능한 토큰·요청 예산이어야 합니다.
지터, 지수 상한, 벽시계 예산(세 가지 숫자)
온콜이 티켓에 붙여 넣을 수 있는 문서화된 정책을 채택하세요:
- 첫
429재시도 전 0.4–1.2초 지터, 뜨거운 0초 루프 금지. - 시도 간 지수 상한 32–64초—벤더가 “2분 뒤에 오라”고 해도 그 이상은 사람 에스컬레이션.
- 사용자 대면 채팅 턴은 누적 재시도 대기 180초에서 잡 전체를 하드 스톱—그 이상이면 게이트웨이가 “멈춘 것”으로 보여 채널 스팸과 또 다른 429 층이 생깁니다.
sleep $((2 + RANDOM % 3))
curl -sS -D - "https://api.example/v1/health" -o /dev/null | head -n1
런북: 차트가 노랗게 될 때 여섯 단계
- 릴리스 동결: 롤백이 아니면
openclaw패키지 릴리스를 멈춥니다. 인시던트 규칙 하 2분 동료 검토 config-only 변경은 허용. - 엣지 분류: 로그의 inbound/outbound 라벨로 분류합니다. outbound 429면 라이브 설정에서 동시성·조직 한도를 스냅샷하고 시크릿은 가립니다.
- 스케일 다운이 먼저: 병렬 도구 러너를 50% 줄이고 p95 지연이 나아지면 과부하가 아니라 큐 기아입니다.
- 이그레스·DNS 베이스라인과 비교: 같은 시기 TLS 오류가 올랐다면 클라이언트가 503으로 잘못 분류한 전송 실패일 수 있습니다.
- 데몬과 동일 환경에서
openclaw doctor를 재실행합니다(doctor/허용 목록). 오래된 env나 모델 허용 목록 이슈가 스로틀인 척할 수 있습니다. - 포스트모템 숫자 세 쌍: (1) 피크 in-flight, (2) 요청 대비 429%, (3) 호출당 중앙값 토큰—(3)이 튀면 프롬프트 회귀이지 제공자 탓이 아닙니다.
Grafana / Loki가 한 쿼리로 답하게 로그할 것
최소 ts, provider, route(completions vs embeddings), attempt, status, 반환 시 request_id, ms 벽시간을 내보냅니다. 가능하면 org와 surface(채팅 vs 헤드리스 실행)를 넣어 고객 가시 SLO와 배치를 분리합니다. 루프백용 준비성·프로브를 확장합니다. 유지보수 창에 저QPS “카나리” 완성을 넣을 수 있으면 토큰 라인 항목만 사전 승인하면 됩니다. 오래된 모듈 업그레이드와 인시던트를 교차 링크하세요—Node HTTP 스택 버그가 프로세스마다 버전이 다르면 무작위 5xx처럼 보입니다.
FAQ: 스로틀, 공정성, 운영 신뢰
| 질문 | 한 줄 답 |
|---|---|
| 기본 해결이 “API 할당량 더 산다”인가요? | 지속 성장에는 때로 그렇지만 먼저 트래픽 형태—커스텀 스킬의 잘못된 병렬 for-each가 새 할당량을 몇 시간 안에 태울 수 있습니다. |
| 같은 리전에 물리 Mac을 하나 더 둘까요? | CPU는 낮은데 HTTP만 포화면 벤더 지출 키우기보다 노드 추가가 쌀 수 있습니다—리전 플랜을 보고 조직·환경을 나눕니다. |
같은 헤드리스 노드의 관련 런북
이그레스 DNS/TLS(전송 진실), 인바운드 웹훅·재시도 의미(다른 429), 증상이 “Discord에 멈춤”일 때는 서브에이전트 채널 트리아지를 보세요. 안정적인 환경 배선은 launchd·API 키 위생을 계속 씁니다.
HK / JP / KR / SG / US에서 Mac mini M4가 버스트 모델 트래픽에 맞는 이유
OpenClaw는 버스트 CPU(도구 오케스트레이션, 가끔 로컬 임베딩)와 종일 NIC 사용(HTTP/2 스트리밍, 반복 TLS, 브리지 하트비트)을 섞습니다. 물리 Mac mini M4는 예측 가능한 스택에 두 workload를 둡니다—백오프 알고리즘에 대한 타이머 품질을 하이퍼바이저가 속이지 않고, 8GB Linux 슬라이스에서 나는 OOM 출렁임 없이 장문 JSON 로그 버퍼를 통합 메모리에 담을 여유가 있습니다. 게이트웨이를 모바일 QA와 Xcode 빌드 팜과 같은 메트로에 두면 SSH·디스크·지원 시간에 대한 벤더 관계가 하나로 단순해집니다—증거를 모은 뒤 두 노드로 스케일하세요.
