Come iniziare a utilizzare Private AI Automation Services in VMware Aria Automation con Configurazione guidata catalogo

L'amministratore del cloud può utilizzare lo stack VMware Cloud Foundation per gestire l'infrastruttura abilitata per GPU e i domini dei carichi di lavoro IA/ML. In VMware Aria Automation, è possibile configurare e fornire macchine virtuali di deep learning (DL VM) e cluster di Tanzu Kubernetes Grid (TKG) abilitati per GPU come elementi del catalogo che i data scientist e i team DevOps dell'organizzazione possono richiedere nel catalogo self-service di Automation Service Broker.

Che cos'è VMware Private AI Foundation?

VMware Private AI Foundation con NVIDIA fornisce una piattaforma per il provisioning dei carichi di lavoro IA in VMware Cloud Foundation con GPU NVIDIA. Inoltre, l'esecuzione dei carichi di lavoro IA basati su container NVIDIA GPU Cloud (NGC) viene convalidata specificamente da VMware by Broadcom. Per ulteriori informazioni, vedere Che cos'è VMware Private AI Foundation con NVIDIA.

Private AI Automation Services è il nome collettivo di tutte le funzionalità di VMware Private AI Foundation disponibili in VMware Aria Automation.

Per iniziare a utilizzare Private AI Automation Services, eseguire Configurazione guidata catalogo in VMware Aria Automation. La procedura guidata consente di connettere VMware Private AI Foundation a VMware Aria Automation.

Come funziona Configurazione guidata catalogo?

Importante: Configurazione guidata catalogo non è abilitata per impostazione predefinita. Contattare VMware by Broadcom Professional Services per attivare la procedura guidata per l'organizzazione.

Utilizzando Configurazione guidata catalogo, è possibile eseguire le attività seguenti:

1. Aggiungere un account cloud di vCenter. Gli account cloud sono le credenziali utilizzate per raccogliere dati da e distribuire risorse nell'istanza di vCenter.
2. Aggiungere una licenza di NVIDIA.
3. Selezionare il contenuto da aggiungere al catalogo di Automation Service Broker.
4. Creare un progetto. Il progetto collega gli utenti alle regioni degli account cloud, in modo che possano distribuire modelli cloud con le reti e le risorse di storage nell'istanza di vCenter.

Dopo aver eseguito Configurazione guidata catalogo per la prima volta, nel catalogo di Automation Service Broker vengono creati due elementi del catalogo che gli utenti dell'organizzazione possono distribuire:

• Workstation IA: una macchina virtuale abilitata per GPU che può essere configurata con vCPU, vGPU, memoria e software IA/ML di NVIDIA desiderati.
• AI Kubernetes Cluster: un cluster Tanzu Kubernetes abilitato per GPU che può essere configurato con l'operatore GPU NVIDIA.

È possibile eseguire nuovamente la procedura guidata più volte se è necessario modificare le impostazioni specificate, ad esempio per modificare le licenze o creare elementi del catalogo IA per altri progetti. Ogni volta che si esegue la procedura guidata, vengono creati due nuovi elementi del catalogo oltre a tutti gli elementi creati in precedenza.

Prima di iniziare

• Verificare che sia in esecuzione VMware Aria Automation 8.17.
• Verificare che sia in esecuzione VMware Cloud Foundation 5.1.1, che include vCenter 8.0 Update U2b.
• Verificare di disporre di un account cloud vCenter in VMware Aria Automation.
• Verificare di disporre di un'organizzazione NVIDIA GPU Cloud Enterprise con una sottoscrizione al servizio cloud premium.
• Verificare di disporre di un cluster supervisore abilitato per GPU configurato tramite la gestione del carico di lavoro.
• Configurare VMware Aria Automation per VMware Private AI Foundation con NVIDIA. Vedere Configurazione di VMware Aria Automation per VMware Private AI Foundation con NVIDIA.
• Completare l'Avvio rapido di VMware Cloud Foundation prima di eseguire Configurazione guidata catalogo. I cluster supervisore e SDDC devono essere registrati in VMware Aria Automation. Vedere Come iniziare a utilizzare VMware Aria Automation con Avvio rapido di VMware Cloud Foundation.
• Verificare di aver generato il file .tok della licenza dal server di gestione delle licenze di NVIDIA e di disporre della chiave API di NVIDIA NGC Portal. La chiave di accesso a NVIDIA NGC Portal viene utilizzata per scaricare e installare i driver vGPU.
• Configurare Single Sign-On (SSO) per Cloud Consumption Interface (CCI). Vedere Configurazione di Single Sign-On per CCI.
• Verificare di aver effettuato la sottoscrizione alla libreria dei contenuti in https://packages.vmware.com/dl-vm/lib.json.

Procedura

1. Dopo aver installato VMware Aria Automation e aver effettuato l'accesso per la prima volta, fare clic su Inizia Avvio rapido.

   

2. Nella scheda Servizi di automazione IA privati, fare clic su Inizia.
3. Selezionare l'account cloud a cui fornire l'accesso.

   

   Tenere presente che tutti i valori indicati qui sono esempi di casi d'uso. I valori dell'account variano in base all'ambiente in uso.

   1. Selezionare un account cloud vCenter.
   2. Selezionare un supervisore abilitato per la GPU.
   3. Immettere il nome di una regione.

      È consigliabile utilizzare un nome descrittivo per la regione che consenta agli utenti di distinguere le regioni abilitate per GPU dalle altre regioni disponibili.

      Se il supervisore è già configurato con una regione, viene selezionata automaticamente una regione.

   4. Fare clic su Avanti.
4. Fornire informazioni sul server di gestione delle licenze di NVIDIA.

   

   1. Selezionare il tipo di server di gestione delle licenze di NVIDIA.
      • Un'istanza di Cloud License Service (CLS) è ospitata in NVIDIA Licensing Portal.
      • Un'istanza di Delegated License Service (DLS) è ospitata in locale in una posizione accessibile da una rete privata. Se si seleziona questo tipo di server, è necessario specificare anche la posizione del server.
      Per ulteriori informazioni, vedere il documentazione di NVIDIA License System.
   2. Copiare e incollare il contenuto del file di licenza.
      La chiave dell'API di NVIDIA Licensing Portal viene utilizzata per valutare se un utente dispone delle autorizzazioni per scaricare i driver vGPU di NVIDIA. La chiave API deve essere un UUID.

      Nota: La chiave API generata da NVIDIA Licensing Portal non è uguale alla chiave API NVAIE.
   3. Fare clic su Avanti.
5. Configurare gli elementi del catalogo.

   

   1. Selezionare l'immagine della macchina virtuale che si desidera utilizzare per creare la macchina virtuale workstation.
   2. Selezionare le classi di macchine virtuali che si desidera rendere disponibili per gli utenti del catalogo.
      È necessario aggiungere almeno una classe con supporto GPU e una classe senza supporto GPU.

      • Le classi di macchine virtuali abilitate per GPU vengono utilizzate per la macchina virtuale di deep learning e per i nodi worker del cluster Kubernetes. Quando l'elemento del catalogo viene distribuito, il cluster Kubernetes viene creato con le classi di macchine virtuali selezionate.
      • Per eseguire i piani di controllo Kubernetes, sono necessari nodi senza supporto GPU.
   3. Selezionare la classe di storage da applicare alle macchine virtuali.
   4. Specificare il registro del container in cui si desidera estrarre le risorse cloud GPU di NVIDIA.

      Se si seleziona un registro self-hosted, gli elementi del catalogo richiedono una configurazione manuale aggiuntiva dopo il completamento della procedura guidata. Contattare VMware by Broadcom Professional Services.

   5. Fare clic su Avanti.
6. Configurare l'accesso agli elementi del catalogo creando un progetto e assegnando gli utenti.

   

   I progetti vengono utilizzati per gestire le persone, le risorse assegnate, i modelli cloud e le distribuzioni.

   1. Immettere un nome e una descrizione per il progetto.

      Il nome del progetto può contenere solo caratteri alfanumerici minuscoli o trattini (-).

   2. Per rendere gli elementi del catalogo disponibili per altri utenti, aggiungere un Amministratore e Membri.

      Gli amministratori hanno più autorizzazioni di quelle dei membri. Per ulteriori informazioni, vedere Quali sono i ruoli utente di VMware Aria Automation.

   3. Fare clic su Avanti.
7. Verificare la configurazione nella pagina Riepilogo.

   Prima di eseguire la procedura guidata, è consigliabile salvare i dettagli della configurazione.

8. Fare clic su Fine.

Risultati

Gli elementi del catalogo Workstation IA e AI Kubernetes Cluster vengono creati nel catalogo di Automation Service Broker e gli utenti dell'organizzazione possono ora distribuirli.

Passaggi successivi

• Verificare che il modello sia disponibile nel catalogo per i membri dei progetti selezionati con cui è stato condiviso il contenuto e monitorare il processo di provisioning per garantire la corretta distribuzione. Vedere Come distribuire gli elementi del catalogo PAIF.
• Se si desidera controllare per quanto tempo può esistere una distribuzione, creare un lease. Vedere Configurazione dei criteri di Automation Service Broker.
• Per modificare gli input utente al momento della richiesta, è possibile creare un modulo personalizzato. Vedere Personalizzazione di un'icona e del modulo di richiesta di Automation Service Broker.

Risoluzione dei problemi

• Se Configurazione guidata catalogo non riesce, eseguire di nuovo la procedura guidata per un progetto diverso.