LiteLLM
LiteLLM은 100개 이상의 모델 프로바이더에 대해 통합된 API를 제공하는 오픈 소스 LLM 게이트웨이입니다. LiteLLM을 통해 OpenClaw를 라우팅하여 중심화된 비용 추적, 로깅을 하고 OpenClaw 설정을 변경하지 않고 백엔드를 유연하게 변경할 수 있습니다.OpenClaw와 함께 LiteLLM을 사용하는 이유?
- 비용 추적 — OpenClaw가 모든 모델에 소비한 비용을 정확히 파악
- 모델 라우팅 — 설정 변경 없이 Claude, GPT-4, Gemini, Bedrock 간 전환
- 가상 키 — OpenClaw에 대한 지출 한도가 있는 키 생성
- 로깅 — 디버깅을 위한 전체 요청/응답 로그
- 페일오버 — 기본 프로바이더가 다운된 경우 자동으로 대체 제공
빠른 시작
온보딩 통해
수동 설정
- LiteLLM 프록시 시작:
- OpenClaw를 LiteLLM으로 지정:
설정
환경 변수
설정 파일
가상 키
OpenClaw에 대한 지출 한도가 있는 전용 키 생성:LITELLM_API_KEY로 사용합니다.
모델 라우팅
LiteLLM은 다른 백엔드로 모델 요청을 라우팅할 수 있습니다. LiteLLMconfig.yaml에서 설정하십시오:
claude-opus-4-6을 요청하며, LiteLLM이 라우팅을 처리합니다.
사용량 보기
LiteLLM의 대시보드나 API를 확인하세요:참고 사항
- LiteLLM은 기본적으로
http://localhost:4000에서 실행됩니다. - OpenClaw는 OpenAI 호환
/v1/chat/completions엔드포인트를 통해 연결됩니다. - 모든 OpenClaw 기능은 LiteLLM을 통해 작동하며 제한이 없습니다.