⚡ नवीन — Kimi K3 आता लाइव: तुमची Moonshot की जोडा →
दस्तऐवज

LiteLLM वरून माइग्रेट करा

← सर्व माइग्रेशन गाइड

गेटवेएक-ओळ swap

self-hosted proxy काढा, किंवा तुमच्या LiteLLM config मध्ये BharatRouter ला एक मॉडेल म्हणून जोडा.

बदल

आधी — LiteLLM

# self-hosted LiteLLM proxy
from openai import OpenAI

client = OpenAI(
    base_url="http://localhost:4000",
    api_key="sk-litellm-...",
)

नंतर — BharatRouter

# managed — no proxy to run
from openai import OpenAI

client = OpenAI(
    base_url="https://api.bharatrouter.com/v1",
    api_key="br-...",
)

काय कशावर मॅप होते

LiteLLMBharatRouter
config.yaml मध्ये model_listhosted catalog + तुमच्या providers साठी BYOK
router_settings / fallbacksसेव्ह केलेल्या Collections + circuit-breaker failover
context_window_fallbacksfailover chain पायरी (config adapter roadmap वर)
self-managed Postgres + Redisपूर्णपणे managed — काहीही host करायचे नाही

तुम्हाला काय मिळते

  • कोणताही proxy चालवणे, patch किंवा scale करणे नाही; routing, budgets आणि failover managed.
  • India residency + INR billing, स्वतः न बनवता.

कोणत्या गोष्टींकडे लक्ष द्यावे

  • LiteLLM ठेवायचे आहे? BharatRouter ला एक openai/… मॉडेल म्हणून br-… key आणि gateway वर सेट केलेल्या base_url सह जोडा.
  • LiteLLM चे YAML fallbacks अजून import होत नाहीत — त्यांना Collection म्हणून पुन्हा तयार करा.

माइग्रेशनमध्ये अडकलात? [email protected] वर लिहा,FAQ पाहा, किंवा BYOK ने तुमचे accounts आणि दर ठेवा।