Inizia a utilizzare i test di strumentazione

Questa guida descrive come preparare ed eseguire un test di strumentazione utilizzando Firebase Test Lab. Per utilizzare questa guida, avrai bisogno di un test di strumentazione (scritto da te o dal tuo team) che utilizzi i framework di test Android Espresso o UI Automator. I test di strumentazione possono essere eseguiti fino a 45 minuti su dispositivi fisici e fino a 60 minuti su dispositivi virtuali.

Nei passaggi successivi, caricherai l'APK della tua app e l'APK del test su Firebase.

Nota: Test Lab non supporta più il framework di test Android Robotium.

(Facoltativo) Aggiungere la raccolta di screenshot all'app

Firebase Test Lab include una libreria (testlab-instr-lib) che puoi utilizzare per elaborare gli screenshot che acquisisci con ScreenCapture di AndroidX quando esegui test di strumentazione, ad esempio test scritti utilizzando Espresso test framework. Questa sezione descrive come creare oggetti ScreenCapture con la libreria AndroidX e come elaborarli utilizzando testlab-instr-lib.

Dopo l'esecuzione del test di strumentazione, puoi visualizzare gli screenshot acquisiti nella console Firebase.

Provare un'app di esempio

Scarica l'app di esempio NotePad per provare questa funzionalità. La funzionalità di acquisizione degli screenshot è già incorporata nel progetto Blocco note.

Passaggio 1: Aggiungere la libreria di screenshot al progetto

1. Nel file Gradle delle impostazioni a livello di radice del progetto di test (settings.gradle.kts o settings.gradle), aggiungi il repository Maven di Google a ogni sezione repositories:

   pluginManagement {
       repositories {
           // Add the following line:
           google() // Google's Maven repository
           mavenCentral()
           gradlePluginPortal()
       }
   }
   dependencyResolutionManagement {
       repositoriesMode.set(RepositoriesMode.FAIL_ON_PROJECT_REPOS)
       repositories {
           // Add the following line:
           google() // Google's Maven repository
           mavenCentral()
       }
   }
   // ...

2. Nel file Gradle del modulo (a livello di app) (di solito <project>/<app-module>/build.gradle.kts o <project>/<app-module>/build.gradle), aggiungi una dipendenza per la libreria di screenshot Test Lab.

   dependencies {
     // ...
     // Add Test Lab's instrumentation test screenshot library:
     androidTestImplementation("com.google.firebase:testlab-instr-lib:0.2")
     // ...

3. Nel file AndroidManifest.xml del test, registra FirebaseScreenCaptureProcessor in un tag di metadati all'interno dell'elemento <instrumentation>. Puoi anche specificare il processore come argomento in AndroidJUnitRunner (consulta la documentazione di riferimento di AndroidJUnitRunner per istruzioni su come farlo).

   <instrumentation
     // Check that you have the following line (if not, add it):
     android:name="androidx.test.runner.AndroidJUnitRunner" // Specifies AndroidJUnitRunner as the test runner
     android:targetPackage="com.your.package.name">
   
   // Add the following:
   <meta-data
     android:name="screenCaptureProcessors"
     android:value="com.google.firebase.testlab.screenshot.FirebaseScreenCaptureProcessor" />
   </instrumentation>
   ...
   

4. Nel file AndroidManifest.xml dell'app, aggiungi le seguenti righe all'interno dell'elemento <manifest>:

    <uses-permission android:name="android.permission.WRITE_EXTERNAL_STORAGE"/>
   

5. Nel file AndroidManifest.xml, specifica le autorizzazioni di sistema per la tua app aggiungendo le seguenti righe all'interno del tag <manifest>. Se esegui test su Android 10 (livello API 29) o versioni successive, ometti l'autorizzazione WRITE_EXTERNAL_STORAGE (la tua app non richiede questa autorizzazione per leggere e scrivere screenshot sul dispositivo).

   <manifest ... >
       <!-- WRITE_EXTERNAL_STORAGE is not needed on Android 10 (API level 29) or higher. -->
       <uses-permission android:name="android.permission.WRITE_EXTERNAL_STORAGE"/>
       <uses-permission android:name="android.permission.INTERNET"/>
       ...
   </manifest>

Passaggio 2: Acquisire screenshot durante il test

In qualsiasi punto del test in cui vuoi fare uno screenshot, chiama il metodo Screenshot.capture() dalla libreria AndroidX. Viene prodotto un oggetto ScreenCapture. Quando chiami process() sull'oggetto ScreenCapture, la chiamata viene elaborata utilizzando ScreenCaptureProcessor registrato in AndroidManifest.xml. Tieni presente che BasicScreenCaptureProcessor viene utilizzato se non sono registrati processori. Poiché hai registrato FirebaseScreenCaptureProcessor, i tuoi screenshot verranno elaborati tramite FirebaseScreenCaptureProcessor e saranno disponibili con i risultati quando esegui il test con Firebase Test Lab.

Esempi di casi d'uso per la creazione di un ScreenCapture:

• Acquisire una ScreenCapture completa su API Build.VERSION_CODES.JELLY_BEAN_MR2 e versioni successive:

  Screenshot.capture()
  

• Esegui un ScreenCapture dell'attività a qualsiasi livello API. Tieni presente che questa è l'unica opzione per i dispositivi con versioni precedenti a Build.VERSION_CODES.JELLY_BEAN_MR2.

  @Rule
    public ActivityTestRule<MainActivity> activityRule = new ActivityTestRule<>(MainActivity.class);
  ...
  Screenshot.capture(activityRule.getActivity());
  ...
  

Esempi di casi d'uso per l'elaborazione di una ScreenCapture

• Elabora un ScreenCapture tramite FirebaseScreenCaptureProcessor:

  Screenshot.capture().process();
  

• Elabora un ScreenCapture tramite un ScreenCaptureProcessor specificato (in questo modo puoi saltare la registrazione del responsabile del trattamento):

  Set<ScreenCaptureProcessor> processors = new HashSet<>();
  processors.add(new FirebaseScreenCaptureProcessor());
  Screenshot.capture().process(processors);
  

• Imposta il nome e il formato del ScreenCapture ed elaboralo utilizzando il processore registrato:

  Screenshot.capture().setName("myscreenshot").setFormat(CompressFormat.JPEG).process();
  

Passaggio 3: Crea ed esegui il test

1. Crea la tua app e testa gli APK (per istruzioni, vedi Testare l'app).

2. Carica i file APK nella dashboard Test Lab della console Firebase.

3. Infine, esegui il test.

Passaggio 4: Visualizzare gli screenshot dei test

Al termine del test, puoi visualizzare gli screenshot acquisiti nella console Firebase.

1. Nella scheda Test, seleziona il test completato, poi fai clic sulla scheda Risultati.

2. Seleziona di nuovo il test e poi fai clic sulla scheda Screenshot visualizzata.

(Facoltativo) Attivare funzionalità di test aggiuntive

Puoi attivare le seguenti funzionalità nel test prima di eseguirlo con Test Lab:

Abilita l'agente di orchestrazione

Android Test Orchestrator è uno strumento che esegue ogni test di instrumentazione dell'app in modo indipendente. Test Lab utilizza sempre l'ultima versione di Orchestrator.

Per attivare Orchestrator per Test Lab, nella configurazione del test di strumentazione,fai clic su Opzioni aggiuntive > Esegui con Orchestrator.

Attenzione: per evitare di utilizzare la quota o di ricevere addebiti per test non funzionanti, esegui Orchestrator localmente prima di provarlo in Test Lab. Verifica che Orchestrator funzioni nella tua app eseguendo un test sulla tua macchina prima di caricare l'APK. Tieni presente che i test con Orchestrator richiedono un po' più di tempo rispetto a quelli senza e potrebbero influire sulla fatturazione o causare il superamento del limite di timeout.

Quando utilizzi Orchestrator, usufruisci di quanto segue:

• Nessuno stato condiviso. Ogni test viene eseguito nella propria istanza di strumentazione, quindi uno stato condiviso non si accumula tra i test.
• Arresti anomali isolati. Se un test ha esito negativo, viene terminata solo l'instrumentazione e gli altri test della suite possono comunque essere eseguiti.

Tieni presente che quando utilizzi Orchestrator, ogni test esegue la propria istanza di strumentazione, il che significa che il processo dell'app viene riavviato dopo ogni scenario di test. L'aumento dei tempi di esecuzione risultante potrebbe influire sull'utilizzo della quota o sul tempo fatturato e potrebbe causare il superamento dei limiti di timeout dei tuoi dispositivi. Se riduci il tempo di avvio della tua app, questo overhead si ridurrà.

Per impostare opzioni aggiuntive per Orchestrator, specificarle tramite il campo environmentVariables. Ad esempio, per utilizzare clearPackageData, utilizza questa opzione in gcloud:

--environment-variables clearPackageData=true

Attiva lo sharding

Lo sharding dei test divide un insieme di test in sottogruppi (shard) che vengono eseguiti separatamente in modo isolato. Test Lab esegue automaticamente ogni shard in parallelo utilizzando più dispositivi e completa l'intero set di test in meno tempo.

Ad esempio, se crei N shard, per ogni dispositivo selezionato, Test Lab crea N dispositivi identici ed esegue un sottoinsieme dei test su ciascun dispositivo. Ciò significa che gli scenari di test suddivisi possono comportare più esecuzioni di test per dispositivo. Gli scenari di test non suddivisi, tuttavia, comportano un'esecuzione del test per dispositivo. Per scoprire i concetti di Test Lab, consulta Concetti chiave.

Per attivare la suddivisione dei test nella console Firebase:

1. Nella configurazione del test di strumentazione,fai clic su Opzioni aggiuntive.

2. Nella sezione Sharding, inserisci il numero di shard che vuoi eseguire.

Fatturazione per gli shard di test

Test Lab implementa gli shard sfruttando il meccanismo di sharding integrato di AndroidJUnitRunner. Per evitare che ti vengano addebitati shard vuoti (shard senza scenari di test assegnati), il numero di shard che crei deve essere inferiore al numero totale di scenari di test. A seconda del tempo necessario per l'esecuzione di ogni scenario di test, in genere è consigliabile assegnare 2-10 scenari di test per shard.

Attenzione: i test di sharding potrebbero costare di più. Sebbene lo sharding dei test riduca il tempo necessario per l'esecuzione di tutti i test, il sovraccarico di avvio dell'app su ogni shard potrebbe aumentare i tempi dei singoli dispositivi (il tempo necessario a un dispositivo per eseguire i test). Poiché gli addebiti vengono calcolati al minuto per ogni shard, gli addebiti totali potrebbero aumentare. Inoltre, gli shard vengono conteggiati ai fini della quota giornaliera per le esecuzioni dei test.

Per ulteriori informazioni sulla fatturazione, consulta Utilizzo, quote e fatturazione.