Перейти до основного вмісту

​
NVIDIA

NVIDIA надає OpenAI-сумісний API за адресою https://integrate.api.nvidia.com/v1 для моделей Nemotron і NeMo. Автентифікація виконується за допомогою API-ключа з NVIDIA NGC.

​
Налаштування CLI

Експортуйте ключ один раз, потім запустіть онбординг і встановіть модель NVIDIA: 
export NVIDIA_API_KEY="nvapi-..."
openclaw onboard --auth-choice skip
openclaw models set nvidia/nvidia/llama-3.1-nemotron-70b-instruct
Якщо ви все ще передаєте --token, пам’ятайте, що він потрапляє в історію оболонки й вивід ps; за можливості віддавайте перевагу env-змінній.

​
Фрагмент конфігурації

{
  env: { NVIDIA_API_KEY: "nvapi-..." },
  models: {
    providers: {
      nvidia: {
        baseUrl: "https://integrate.api.nvidia.com/v1",
        api: "openai-completions",
      },
    },
  },
  agents: {
    defaults: {
      model: { primary: "nvidia/nvidia/llama-3.1-nemotron-70b-instruct" },
    },
  },
}

​
ID моделей

Посилання на модельНазваКонтекстМакс. вивід
nvidia/nvidia/llama-3.1-nemotron-70b-instructNVIDIA Llama 3.1 Nemotron 70B Instruct131,0724,096
nvidia/meta/llama-3.3-70b-instructMeta Llama 3.3 70B Instruct131,0724,096
nvidia/nvidia/mistral-nemo-minitron-8b-8k-instructNVIDIA Mistral NeMo Minitron 8B Instruct8,1922,048

​
Примітки

  • OpenAI-сумісний endpoint /v1; використовуйте API-ключ із NVIDIA NGC.
  • Провайдер автоматично вмикається, коли задано NVIDIA_API_KEY.
  • Вбудований каталог є статичним; у вихідному коді вартість типово встановлена в 0.