Pular para o conteúdo principal

NVIDIA

A NVIDIA fornece uma API compatível com OpenAI em https://integrate.api.nvidia.com/v1 para modelos Nemotron e NeMo. Autentique-se com uma chave de API do NVIDIA NGC.

Configuração da CLI

Exporte a chave uma vez, depois execute o onboarding e defina um modelo da NVIDIA:
export NVIDIA_API_KEY="nvapi-..."
openclaw onboard --auth-choice skip
openclaw models set nvidia/nvidia/llama-3.1-nemotron-70b-instruct
Se você ainda passar --token, lembre-se de que ele vai para o histórico do shell e para a saída de ps; prefira a variável de ambiente quando possível.

Trecho de configuração

{
  env: { NVIDIA_API_KEY: "nvapi-..." },
  models: {
    providers: {
      nvidia: {
        baseUrl: "https://integrate.api.nvidia.com/v1",
        api: "openai-completions",
      },
    },
  },
  agents: {
    defaults: {
      model: { primary: "nvidia/nvidia/llama-3.1-nemotron-70b-instruct" },
    },
  },
}

IDs de modelo

Referência do modeloNomeContextoSaída máxima
nvidia/nvidia/llama-3.1-nemotron-70b-instructNVIDIA Llama 3.1 Nemotron 70B Instruct131,0724,096
nvidia/meta/llama-3.3-70b-instructMeta Llama 3.3 70B Instruct131,0724,096
nvidia/nvidia/mistral-nemo-minitron-8b-8k-instructNVIDIA Mistral NeMo Minitron 8B Instruct8,1922,048

Observações

  • Endpoint /v1 compatível com OpenAI; use uma chave de API do NVIDIA NGC.
  • O provedor é habilitado automaticamente quando NVIDIA_API_KEY está definido.
  • O catálogo empacotado é estático; os custos assumem o valor padrão 0 no código-fonte.