Ana içeriğe atla

NVIDIA

NVIDIA, Nemotron ve NeMo modelleri için https://integrate.api.nvidia.com/v1 adresinde OpenAI uyumlu bir API sunar. NVIDIA NGC üzerinden alınan bir API anahtarıyla kimlik doğrulaması yapın.

CLI kurulumu

Anahtarı bir kez dışa aktarın, ardından onboarding’i çalıştırın ve bir NVIDIA modeli ayarlayın:
export NVIDIA_API_KEY="nvapi-..."
openclaw onboard --auth-choice skip
openclaw models set nvidia/nvidia/llama-3.1-nemotron-70b-instruct
Hâlâ --token geçiriyorsanız, bunun kabuk geçmişine ve ps çıktısına yazılacağını unutmayın; mümkün olduğunda env var’ı tercih edin.

Yapılandırma parçası

{
  env: { NVIDIA_API_KEY: "nvapi-..." },
  models: {
    providers: {
      nvidia: {
        baseUrl: "https://integrate.api.nvidia.com/v1",
        api: "openai-completions",
      },
    },
  },
  agents: {
    defaults: {
      model: { primary: "nvidia/nvidia/llama-3.1-nemotron-70b-instruct" },
    },
  },
}

Model kimlikleri

Model refAdBağlamMaksimum çıktı
nvidia/nvidia/llama-3.1-nemotron-70b-instructNVIDIA Llama 3.1 Nemotron 70B Instruct131,0724,096
nvidia/meta/llama-3.3-70b-instructMeta Llama 3.3 70B Instruct131,0724,096
nvidia/nvidia/mistral-nemo-minitron-8b-8k-instructNVIDIA Mistral NeMo Minitron 8B Instruct8,1922,048

Notlar

  • OpenAI uyumlu /v1 uç noktası; NVIDIA NGC’den bir API anahtarı kullanın.
  • NVIDIA_API_KEY ayarlandığında sağlayıcı otomatik olarak etkinleşir.
  • Paketlenmiş katalog statiktir; maliyetler kaynakta varsayılan olarak 0 olur.