Dodawanie węzła roboczego GPU do klastra Red Hat OpenShift w systemie AWS

W oficjalnej dokumentacji Red Hat omówiono sposób tworzenia zestawu maszyn na serwerze AWS. Poniżej przedstawiono również omówione tutajomówione informacje. Ta procedura obejmuje utworzenie kopii istniejącego zasobu niestandardowego YAML węzła procesu roboczego. Kopia jest następnie aktualizowana w przypadku produktu instanceType (zaktualizowanego do wersji p3.2xlarge), nazwa metadanych, etykiety selektora i odpowiednie metadane są usuwane. Dobrze jest również sprawdzić wartości pod kluczem placement (w razie potrzeby zaktualizuj opcje availabilityZone i region). Nowy zestaw maszyn jest następnie tworzony przy użyciu tego zasobu niestandardowego YAML.

1. W powłoce sterującej należy zalogować się jako masocpuser (lub kubeadmin).
2. Przejdź do przestrzeni nazw openshift-machine-api .

   
   oc project openshift-machine-api
   

   Jeśli ta opcja nie zostanie wykonana, należy użyć opcji -n i podać openshift-machine-api jako argument w kolejnych krokach.

3. Wyświetl listę dostępnych makroelementów w klastrze.

   
   oc get machineset -o name
   

4. Wybierz odpowiedni zestaw maszyn jako szablon dla nowego zasobu niestandardowego JAML węzła roboczego GPU. Najlepiej wybrać zestaw maszyn, który znajduje się w tej samej strefie dostępności, co typ instancji GPU EC2 , który ma być używany do tworzenia nowego węzła. Na przykład, jeśli produkt p3.2xlarge jest dostępny w produkcie us-east-1b, należy wybrać zestaw maszyn, który ma us-east-1b jako część jego nazwy.
5. Przypisz zmienną dla nazwy zestawu maszyn szablonów.
   Na przykład:

   
   SOURCE_MACHINESET=machine set.machine.openshift.io/masocp-4kyowr-mm5b5-worker-us-east-1b
   

6. Skopiuj zasób niestandardowy zestawu maszyn źródłowych do nowego pliku.

   
   oc get -o json  $SOURCE_MACHINESET  | jq -r > source-machineset.json
   

   Uwaga: Plik source-machineset.json jest tworzony w bieżącym folderze.
7. Zdefiniuj zmienne, które mają być używane na później.

   
   OLD_MACHINESET_NAME=$(jq '.metadata.name' -r source-machineset.json)
   

   
   NEW_MACHINESET_NAME=${OLD_MACHINESET_NAME/worker/worker-gpu}
   

8. Zmień wartość parametru instanceType, liczbę replik (opcjonalnie), usuń niektóre metadane i skopiuj ją do nowego pliku gpu-machineset.json. Plik ten jest używany do tworzenia nowego zestawu maszyn z układem GPU.

   
   jq -r '.spec.template.spec.providerSpec.value.instanceType = "p3.2xlarge"
     | .spec.replicas = 1
     | del(.metadata.selfLink)
     | del(.metadata.uid)
     | del(.metadata.creationTimestamp)
     | del(.metadata.resourceVersion)
     ' source-machineset.json > gpu-machineset.json
   

9. Zmień nazwę zestawu maszyn w programie gpu-machineset.json.

   
   sed -i "s/$OLD_MACHINESET_NAME/$NEW_MACHINESET_NAME/g" gpu-machineset.json
   

10. Uruchom komendę diff, aby sprawdzić zmiany.

    
    diff -Nuar source-machineset.json gpu-machineset.json
    

    Więcej informacji na ten temat zawiera sekcja Instalowanie i używanie GPU w systemie AWS.

11. Sprawdź wartość availabilityZone (znaleziono pod spec.template.spec.providerSpec.value.placement). Upewnij się, że nowy typ instancji (p3.2xlarge) ma tę samą strefę dostępności, lub można pominąć parę klucz-wartość availability z pliku JSON. Jeśli nie, po utworzeniu zestawu maszyn zostanie wyświetlony błąd. Więcej informacji na ten temat zawiera sekcja Rozwiązywanie problemów pod koniec tego zadania.
12. Utwórz zestaw maszyn:

    
    oc create -f gpu-machineset.json
    

    Przykładowe dane wyjściowe

    Utworzono plik machineset.machine.openshift.io/masocp-4kyowr-mm5b5-worker-gpu-us-east-1b

13. Sprawdź, czy zestaw maszyn został utworzony.

    
    oc get machineset
    

    Przykładowe dane wyjściowe

    NAZWA POŻĄDANA AKTUALNIE DOSTĘPNA WIEK masocp-4kyowr-mm5b5-worker-gpu-us-east-1b 1 1 10s masocp-4kyowr-mm5b5-worker-us-east-1a 3 3 3 3 7d8h masocp-4kyowr-mm5b5-worker-us-east-1b 2 2 2 2 7d8h masocp-4kyowr-mm5b5-worker-us-east-1c 2 2 2 2 7d8h masocp-4kyowr-mm5b5-workerocs-us-east-1a 1 1 1 1 7d7h masocp-4kyowr-mm5b5-workerocs-us-east-1b 1 1 1 1 7d7h masocp-4kyowr-mm5b5-workerocs-us-east-1c 1 1 1 1 7d7h

    To pokazuje, że nowy węzeł GPU został utworzony, ale nie są jeszcze gotowe i dostępne.

    Pobieranie listy komputerów pokazuje status:

    
    oc get machine
    

    Przykładowe dane wyjściowe:

    
    NAME                                              PHASE          TYPE         REGION      ZONE         AGE
    masocp-4kyowr-mm5b5-master-0                      Running        m5.2xlarge   us-east-1   us-east-1a   7d8h
    masocp-4kyowr-mm5b5-master-1                      Running        m5.2xlarge   us-east-1   us-east-1b   7d8h
    masocp-4kyowr-mm5b5-master-2                      Running        m5.2xlarge   us-east-1   us-east-1c   7d8h
    masocp-4kyowr-mm5b5-master-3                      Running        m5.2xlarge   us-east-1   us-east-1a   7d8h
    masocp-4kyowr-mm5b5-master-4                      Running        m5.2xlarge   us-east-1   us-east-1b   7d8h
    masocp-4kyowr-mm5b5-worker-gpu-us-east-1b-nrr4n   Provisioning   p3.2xlarge   us-east-1   us-east-1b   22s
    masocp-4kyowr-mm5b5-worker-us-east-1a-kx449       Running        m5.4xlarge   us-east-1   us-east-1a   7d8h
    masocp-4kyowr-mm5b5-worker-us-east-1a-nn72q       Running        m5.4xlarge   us-east-1   us-east-1a   7d8h
    masocp-4kyowr-mm5b5-worker-us-east-1a-p5nqf       Running        m5.4xlarge   us-east-1   us-east-1a   7d8h
    masocp-4kyowr-mm5b5-worker-us-east-1b-7r5wz       Running        m5.4xlarge   us-east-1   us-east-1b   7d8h
    masocp-4kyowr-mm5b5-worker-us-east-1b-94khr       Running        m5.4xlarge   us-east-1   us-east-1b   7d8h
    masocp-4kyowr-mm5b5-worker-us-east-1c-fvv52       Running        m5.4xlarge   us-east-1   us-east-1c   7d8h
    masocp-4kyowr-mm5b5-worker-us-east-1c-rsnwf       Running        m5.4xlarge   us-east-1   us-east-1c   7d8h
    masocp-4kyowr-mm5b5-workerocs-us-east-1a-hwb4m    Running        m5.4xlarge   us-east-1   us-east-1a   7d7h
    masocp-4kyowr-mm5b5-workerocs-us-east-1b-979w8    Running        m5.4xlarge   us-east-1   us-east-1b   7d7h
    masocp-4kyowr-mm5b5-workerocs-us-east-1c-85ktb    Running        m5.4xlarge   us-east-1   us-east-1c   7d7h
    

    Podczas udostępniania zestawu machinowego przykład danych wyjściowych dla produktu oc get machineset jest następujący:

    
    NAME                                        DESIRED   CURRENT   READY   AVAILABLE   AGE
    masocp-4kyowr-mm5b5-worker-gpu-us-east-1b   1         1         1       1           3m38s
    masocp-4kyowr-mm5b5-worker-us-east-1a       3         3         3       3           7d8h
    masocp-4kyowr-mm5b5-worker-us-east-1b       2         2         2       2           7d8h
    masocp-4kyowr-mm5b5-worker-us-east-1c       2         2         2       2           7d8h
    masocp-4kyowr-mm5b5-workerocs-us-east-1a    1         1         1       1           7d7h
    masocp-4kyowr-mm5b5-workerocs-us-east-1b    1         1         1       1           7d7h
    masocp-4kyowr-mm5b5-workerocs-us-east-1c    1         1         1       1           7d7h
    

    Uruchom komendę oc get machine . Dane wyjściowe wskazują, że komputer jest wyposażony:

    
    NAZWA STREFY REGIONU TYP FAZY REGION
    ...
    masocp-4kyowr-mm5b5-master-3 Running m5.2xlarge us-east-1 us-east-1a 7d8h
    masocp-4kyowr-mm5b5-master-4 Running m5.2xlarge us-east-1 us-east-1b 7d8h
    masocp-4kyowr-mm5b5-worker-gpu-us-east-1b-nrr4n Udostępnione p3.2xlarge us-east-1 us-east-1b 107s
    masocp-4kyowr-mm5b5-worker-us-east-1a-kx449 Uruchomiony m5.4xlarge us-east-1 us-east-1a 7d8h
    ...
    

    Można również sprawdzić konsolę OpenShift , w sekcji Compute > Węzły lub w obszarze Compute > Machinesets.

oc delete machineset <machineset name>