Tester avec la Google Cloud CLI

Ce guide explique comment exécuter un test XCTest ou Game Loop à l'aide de gcloud CLI.

Étape 1 : Configurez votre environnement SDK Google Cloud local

1. Téléchargez le SDK Google Cloud.

Cela inclut l'outil gcloud CLI.

2. Assurez-vous que votre installation est à jour et inclut la commande gcloud firebase :

         gcloud components update

3. Connectez-vous à gcloud CLI à l'aide de votre compte Google :

         gcloud auth login

4. Définissez votre projet Firebase dans gcloud, où PROJECT_ID correspond à l'ID de votre projet Firebase :

        gcloud config set project PROJECT_ID

Étape 2 : Exécutez votre test

Exécuter un XCTest

1. Importez le fichier .zip de votre test en exécutant la commande suivante (si vous n'avez pas encore empaqueté votre application, consultez Empaqueter votre XCTest) :

   cd FOLDER_WITH_TEST_OUTPUT/Build/Products ; \
   zip -r MyTests.zip Debug-iphoneos YOUR_SCHEME_iphoneosDEPLOYMENT_TARGET-arm64.xctestrun

2. Choisissez les dimensions de votre test.

   Test Lab vous permet d'exécuter des tests sur différentes versions d'iOS, différents appareils, différentes orientations d'écran et différents paramètres régionaux. Ces configurations sont appelées dimensions du test. Pour afficher les options de chaque dimension (par exemple, les versions Xcode compatibles avec la version iOS de l'appareil), remplacez models, versions ou locales par dimension dans la commande suivante :

   gcloud firebase test ios dimension list

   L'orientation de l'écran est un peu plus simple, car les seules options sont portrait et landscape.

   Parcourez la liste des dimensions de test et sélectionnez quelques combinaisons sur lesquelles vous souhaitez exécuter votre test. Consultez la page Forfaits pour connaître le nombre maximal de combinaisons que vous pouvez exécuter par jour.

3. Une fois que vous avez choisi un ensemble de dimensions de test, vous pouvez demander à Test Lab d'exécuter vos tests à l'aide de la commande firebase test ios run. Pour chaque combinaison de dimensions de test que vous souhaitez tester, incluez un indicateur --device distinct :

   gcloud firebase test ios run --test PATH/TO/MyTests.zip \
    --device model=MODEL_ID_1,version=VERSION_ID_1,locale=LOCALE_1,orientation=ORIENTATION_1 \
    --device model=MODEL_ID_2,version=VERSION_ID_2,locale=LOCALE_2,orientation=ORIENTATION_2 \
    etc...

   Il est possible que votre test échoue en raison d'une incompatibilité entre la version Xcode avec laquelle le test a été créé et la version Xcode par défaut utilisée par Test Lab. Pour spécifier une version Xcode compatible pour votre test, utilisez l'indicateur --xcode-version :

   gcloud firebase test ios run --test PATH/TO/MyTests.zip \
    --device model=MODEL_ID_1,version=VERSION_ID_1,locale=LOCALE_1,orientation=ORIENTATION_1 \
    --xcode-version=15

   Pour vous aider à identifier et à localiser vos matrices de test dans la console Firebase, vous pouvez éventuellement les étiqueter à l'aide du flag --client-details matrixLabel="<label>" dans l'exemple suivant :

   gcloud beta firebase test ios run --test PATH/TO/MyTests.zip \
     --device model=MODEL_ID_1,version=VERSION_ID_1,locale=LOCALE_1,orientation=ORIENTATION_1 \
     --client-details matrixLabel="my label"

Exécuter un test de boucle de jeu

Exécutez la commande gcloud beta firebase test ios run et utilisez les indicateurs suivants pour configurer l'exécution :

Par exemple, la commande suivante exécute un test Game Loop qui exécute les boucles 1, 4, 6, 7 et 8 sur un iPhone 8 Plus :

gcloud beta firebase test ios run
 --type game-loop --app path/to/my/App.ipa --scenario-numbers 1,4,6-8
 --device-model=iphone8plus

Pour en savoir plus sur gcloud CLI, consultez la documentation de référence.

Étape 3 (facultative) : Automatisez les futurs tests que vous créerez

Créer des scripts pour les commandes gcloud avec Test Lab

Vous pouvez utiliser des scripts shell ou des fichiers batch pour automatiser les commandes de test d'applications mobiles que vous exécuteriez normalement à l'aide de la ligne de commande gcloud. Cet exemple de script Bash exécute un XCTest avec un délai d'expiration de deux minutes et indique si l'exécution du test s'est terminée avec succès :

if gcloud firebase test ios run --test MyTest.zip --timeout 2m
then
    echo "Test matrix successfully finished"
else
    echo "Test matrix exited abnormally with non-zero exit code: " $?
fi

Codes de sortie du script

Test Lab fournit plusieurs codes de sortie que vous pouvez utiliser pour mieux comprendre les résultats des tests que vous exécutez à l'aide de scripts ou de fichiers de commandes.

Étape 4 : Examiner les résultats du test

Lorsque le test commence, vous recevez un lien vers la page Résultats du test. L'exécution des tests peut prendre plusieurs minutes, en fonction du nombre de configurations différentes que vous avez sélectionnées et de la durée du délai d'attente définie pour vos tests. Une fois vos tests exécutés, vous pouvez examiner les résultats. Pour savoir comment interpréter les résultats de vos tests, consultez Analyser les résultats de Firebase Test Lab.

Étape suivante

Consultez la documentation Google Cloud SDK pour découvrir les options de test généralement disponibles ou en version bêta.