GPT‑OSS arriva su RTX: l’AI open-source di OpenAI accelera su PC e workstation NVIDIA

Oggi NVIDIA ha annunciato una collaborazione con OpenAI per portare ai consumatori la nuova famiglia di modelli open-source GPT‑OSS, rendendo disponibile l’intelligenza artificiale avanzata, un tempo riservata ai data center cloud, con prestazioni eccezionali su PC e workstation RTX.

Questa partnership inaugura una nuova generazione di AI locale, potenziata dalle GPU GeForce RTX e RTX PRO. Sono disponibili due varianti progettate per diversi utilizzi:

  • Il modello gpt-oss-20b, ottimizzato per PC NVIDIA RTX AI con almeno 16GB di VRAM, in grado di processare fino a 250 token al secondo su una GPU RTX5090.
  • Il modello gpt-oss-120b, una versione più grande pensata per workstation professionali con GPU NVIDIA RTX PRO.

Questi modelli, addestrati su GPU NVIDIA H100, supportano la precisione MXFP4 su RTX, una tecnica che migliora accuratezza e qualità del modello senza penalizzare le prestazioni. Entrambe le versioni offrono una lunghezza di contesto fino a 131.072 token, tra le più grandi disponibili per inferenza locale, ed integrano architetture mixture-of-experts (MoE) con funzionalità come chain-of-thought, istruzioni e supporto all’uso di tool.

RTX AI Garage di questa settimana illustra come iniziare a usare i nuovi modelli OpenAI su GPU NVIDIA RTX:

  • Ollama App: il modo più semplice per testare i modelli gpt‑oss, completamente ottimizzati per GPU RTX, grazie a un’interfaccia utente immediata.
  • Llama.cpp: NVIDIA collabora con la community open source per ottimizzare le performance su GPU RTX. Tra le novità tecniche figurano le CUDA Graphs per ridurre il sovraccarico. Il codice è disponibile su GitHub.
  • Microsoft AI Foundry: per sviluppatori Windows, i modelli sono disponibili in anteprima pubblica. Basta eseguire il comando Foundry model run gpt‑oss‑20b da terminale per iniziare.

Il fondatore e CEO di NVIDIA Jensen Huang ha sottolineato l’importanza di questo lancio:

“OpenAI ha mostrato al mondo cosa si può costruire con l’AI di NVIDIA e ora sta promuovendo l’innovazione nel software open source. I modelli gptoss permettono agli sviluppatori di tutto il mondo di costruire su basi open-source all’avanguardia, rinforzando la leadership tecnologica degli Stati Uniti nell’IA, grazie alla più grande infrastruttura di calcolo AI al mondo.”

Per iniziare subito con i nuovi modelli di OpenAI su RTX, consulta il blog post RTX AI Garage.

Per maggiori dettagli sulla collaborazione NVIDIA–OpenAI, visita il blog aziendale di NVIDIA.

Translate »
Panoramica privacy

Questo sito Web utilizza i cookie in modo che possiamo fornirti la migliore esperienza utente possibile. Le informazioni sui cookie sono memorizzate nel tuo browser ed eseguono funzioni come riconoscerti quando ritorni sul nostro sito Web e aiutare il nostro team a capire quali sezioni del sito Web trovi più interessanti e utili Per vedere tutta la nostra Privacy Policy, clicca qui..