Firebase Test Lab ให้คุณทดสอบแอปกับอุปกรณ์และการกำหนดค่าแบบต่างๆ คู่มือเริ่มต้นใช้งานนี้มีเส้นทางการใช้งานให้คุณปฏิบัติตาม รวมถึงข้อมูลเบื้องต้นเกี่ยวกับข้อเสนอ Android ของ Test Lab
ดูข้อมูลเกี่ยวกับโควต้าและแผนการตั้งราคาของ Test Lab ได้ที่การใช้งาน โควต้า และราคา
ข้อมูลหลัก
เมื่อคุณเรียกใช้การทดสอบหรือชุดกรอบการทดสอบกับอุปกรณ์และการกำหนดค่าที่เลือกไว้ Test Lab จะทำการทดสอบกับแอปเป็นกลุ่ม จากนั้นแสดงผลเป็นเมทริกซ์ทดสอบ
อุปกรณ์ × การดำเนินการทดสอบ = เมทริกซ์ทดสอบ
- อุปกรณ์
- อุปกรณ์จริงหรืออุปกรณ์เสมือน (Android เท่านั้น) ที่คุณทำการทดสอบ เช่น โทรศัพท์ แท็บเล็ต หรืออุปกรณ์ที่สวมใส่ได้ อุปกรณ์ในเมทริกซ์ทดสอบจะระบุตามรุ่นอุปกรณ์ เวอร์ชันระบบปฏิบัติการ การวางแนวหน้าจอ และภาษา (หรือที่เรียกว่าการตั้งค่าภูมิศาสตร์และภาษา)
- การทดสอบ การดำเนินการทดสอบ
- การทดสอบ (หรือชุดกรอบการทดสอบ) สำหรับใช้ในอุปกรณ์ คุณทำการทดสอบได้ 1 รายการต่ออุปกรณ์ หรือเลือกที่จะชาร์ดการทดสอบและเรียกใช้กรอบการทดสอบในอุปกรณ์ที่แตกต่างกันก็ได้
- เมทริกซ์ทดสอบ
- มีสถานะและผลการทดสอบสำหรับการดำเนินการทดสอบ หากการดำเนินการทดสอบใดๆ ในเมทริกซ์ล้มเหลว เมทริกซ์ทั้งหมดจะล้มเหลว
ขั้นตอนที่ 1: เตรียมการทดสอบสำหรับการอัปโหลดไปยัง Test Lab
ประเภทการทดสอบที่ใช้ได้
คุณทำการทดสอบต่อไปนี้ได้ด้วย Test Lab โปรดทราบว่าการทดสอบทุกประเภทมีการจำกัดไว้ที่ 45 นาทีบนอุปกรณ์จริง และ 60 นาทีบนอุปกรณ์เสมือน ข้อยกเว้นที่ตรวจไม่พบจะทำให้การทดสอบล้มเหลว
การทดสอบการวัดคุมหรือการทดสอบหน่วยที่มีเครื่องดนตรี: การทดสอบที่คุณเขียนโดยใช้เฟรมเวิร์ก Espresso หรือ UI Automator การทดสอบนี้จะทำให้คุณยืนยันสถานะของแอปอย่างชัดแจ้งได้โดยใช้ AndroidJUnitRunnerAPIs
ไปที่ทำการทดสอบการใช้เครื่องมือเพื่อดูวิธีการเตรียมการทดสอบเพื่อเรียกใช้ใน Test Lab
โปรดดูวิธีการสร้างการทดสอบการวัดคุมในเอกสารประกอบของนักพัฒนาแอป Android
การทดสอบ Robo: การทดสอบอัตโนมัติที่วิเคราะห์ UI ของแอป แล้วสำรวจอย่างมีระบบด้วยการจำลองกิจกรรมของผู้ใช้โดยที่คุณไม่ต้องเขียนโค้ด ดูข้อมูลเพิ่มเติมได้ที่เกี่ยวกับการทดสอบ Robo
การทดสอบ Game Loop: การทดสอบที่ใช้ "โหมดสาธิต" เพื่อจำลองการทำงานของผู้เล่นในแอปเกม วิธีนี้เป็นวิธีที่รวดเร็วและรองรับการปรับขนาด ในการยืนยันว่าเกมของคุณทำงานได้ดีสำหรับผู้ใช้ เมื่อคุณเลือกทำการทดสอบ Game Loop คุณสามารถทำสิ่งต่อไปนี้ได้
เขียนการทดสอบในเครื่องเกมของคุณโดยเฉพาะ
หลีกเลี่ยงการเขียนโค้ดเดียวกันสำหรับ UI หรือเฟรมเวิร์กการทดสอบที่แตกต่างกัน
สร้างลูปหลายรายการเพื่อเรียกใช้ในการดำเนินการทดสอบรายการเดียว (ไปที่เกี่ยวกับการทดสอบ Game Loop เพื่อดูข้อมูลเพิ่มเติม) นอกจากนี้ คุณยังจัดระเบียบการวนซ้ำได้โดยใช้ป้ายกำกับเพื่อให้คุณติดตามการวนซ้ำและเรียกใช้การวนซ้ำที่เฉพาะเจาะจงได้
ดูทำการทดสอบ Game Loop สำหรับวิธีการเรียกใช้การทดสอบนี้ด้วย Test Lab
เครื่องมือสำหรับทำการทดสอบ
คุณเลือกเครื่องมือต่อไปนี้เพื่อทำการทดสอบได้
แนะนำสำหรับผู้ใช้ครั้งแรก: คอนโซล Firebase ช่วยให้คุณอัปโหลดแอปและเริ่มการทดสอบจากเว็บเบราว์เซอร์ได้ ดูวิธีการดำเนินการทดสอบโดยใช้เครื่องมือนี้ได้ที่ทดสอบด้วยคอนโซล Firebase
การผสานรวม Android Studio ช่วยให้คุณทดสอบแอปได้โดยไม่ต้องออกจากสภาพแวดล้อมในการพัฒนาซอฟต์แวร์ ดูวิธีทำการทดสอบโดยใช้เครื่องมือนี้ได้ที่ทดสอบด้วย Android Studio
อินเทอร์เฟซบรรทัดคำสั่ง gcloud ช่วยให้คุณเรียกใช้การทดสอบจากบรรทัดคำสั่งได้แบบอินเทอร์แอกทีฟ และยังเหมาะสำหรับการเขียนสคริปต์โดยเป็นส่วนหนึ่งของกระบวนการบิลด์และการทดสอบอัตโนมัติด้วย ดูวิธีการดำเนินการทดสอบโดยใช้เครื่องมือนี้ได้ที่ทดสอบด้วย gcloud CLI
นอกจากนี้ คุณยังทดสอบแอปโดยไม่เสียค่าใช้จ่ายได้ด้วย Test Lab เมื่ออัปโหลดและเผยแพร่ไฟล์ APK ของแอปใน Play Store โดยใช้เวอร์ชันอัลฟ่าหรือเบต้า ดูข้อมูลเพิ่มเติมได้ที่ ใช้รายงานก่อนการเปิดตัวเพื่อระบุปัญหา และการทดสอบ Robo
ขั้นตอนที่ 2: เลือกอุปกรณ์ทดสอบ
Test Lab รองรับการทดสอบในอุปกรณ์ Android หลายแบรนด์และหลายรุ่น ที่ติดตั้งและใช้งานในศูนย์ข้อมูลของ Google การทดสอบบนอุปกรณ์ใน Test Lab จะช่วยให้คุณตรวจพบปัญหาที่อาจจะไม่เกิดขึ้นเมื่อทดสอบแอปโดยใช้โปรแกรมจำลองใน Android Studio ดูข้อมูลเพิ่มเติมได้ที่อุปกรณ์ที่ใช้ได้
ขั้นตอนที่ 3: ตรวจสอบผลการทดสอบ
ไม่ว่าคุณจะเริ่มการทดสอบอย่างไร ผลการทดสอบทั้งหมดจะได้รับการจัดการโดย Test Lab และสามารถดูผลการทดสอบได้ทางออนไลน์
สรุปผลการทดสอบจะได้รับการจัดเก็บโดยอัตโนมัติ และคุณสามารถดูได้ในคอนโซล Firebase โดยจะมีข้อมูลที่เกี่ยวข้องกับการทดสอบของคุณมากที่สุด ได้แก่ วิดีโอทดสอบเกี่ยวกับกรอบการทำงาน ภาพหน้าจอ จำนวนการทดสอบที่ผ่าน ไม่ผ่าน หรือได้ผลลัพธ์ที่ไม่สม่ำเสมอ และอื่นๆ อีกมากมาย
ผลการทดสอบดิบจะมีบันทึกการทดสอบและรายละเอียดความล้มเหลวของแอป และจัดเก็บไว้ในที่เก็บข้อมูล Google Cloud โดยอัตโนมัติ หากระบุที่เก็บข้อมูล คุณจะต้องรับผิดชอบเกี่ยวกับค่าใช้จ่ายของพื้นที่เก็บข้อมูล หากไม่ระบุที่เก็บข้อมูล Test Lab จะสร้างที่เก็บข้อมูลให้คุณโดยไม่มีค่าใช้จ่าย
ดูรายละเอียดเพิ่มเติมได้ที่วิเคราะห์ผลลัพธ์ของ Firebase Test Lab
เมื่อเริ่มการทดสอบจาก Android Studio คุณจะดูผลการทดสอบจากภายในสภาพแวดล้อมการพัฒนาได้ด้วย
การทำความสะอาดอุปกรณ์
Google ให้ความสำคัญกับการรักษาความปลอดภัยของข้อมูลแอปของคุณเป็นอย่างมาก เราปฏิบัติตามแนวทางปฏิบัติแนะนำตามมาตรฐานอุตสาหกรรมเพื่อนำข้อมูลแอปออกและรีเซ็ตการตั้งค่าระบบสำหรับอุปกรณ์จริงหลังจากทำการทดสอบทุกครั้ง เพื่อให้อุปกรณ์พร้อมทำการทดสอบใหม่ๆ สำหรับอุปกรณ์ที่เราสามารถแฟลชด้วยอิมเมจการกู้คืนที่กำหนดเองได้ เราจะก้าวไปอีกขั้นด้วยการแฟลชอุปกรณ์เหล่านี้ระหว่างการทดสอบ
สำหรับอุปกรณ์เสมือนที่ Test Lab ใช้งาน ระบบจะลบอินสแตนซ์ของอุปกรณ์หลังจากใช้งานเพื่อให้การทดสอบแต่ละครั้งใช้อินสแตนซ์ของอุปกรณ์เสมือนใหม่
Test Lab และบริการ Google Play
อุปกรณ์ Test Lab มักจะใช้ SDK บริการ Google Play เวอร์ชันล่าสุด แต่บางเครื่องอาจใช้เวลา 2-3 วันในการอัปเดตหลังจากเปิดตัว SDK เวอร์ชันใหม่ โปรดทราบว่าคุณอาจพบปัญหาความเข้ากันได้ กับอุปกรณ์บางอย่าง
การอนุญาตให้อุปกรณ์ทดสอบเข้าถึงเซิร์ฟเวอร์แบ็กเอนด์ส่วนตัว
แอปบนอุปกรณ์เคลื่อนที่บางแอปต้องสื่อสารกับบริการแบ็กเอนด์ส่วนตัวเพื่อให้ทำงานได้อย่างถูกต้องในระหว่างการทดสอบ หากเซิร์ฟเวอร์แบ็กเอนด์ได้รับการปกป้องโดยกฎไฟร์วอลล์ คุณจะอนุญาตการเข้าถึงอุปกรณ์จริงและอุปกรณ์เสมือนของ Test Lab ได้โดยใช้บล็อกที่อยู่ IP ด้านล่างเพื่อเปิดเส้นทางผ่านไฟร์วอลล์ของคุณ
โฆษณาบนอุปกรณ์เคลื่อนที่
Test Lab มีโครงสร้างพื้นฐานที่รองรับการปรับขนาดซึ่งจะทำให้การทดสอบแอปเป็นแบบอัตโนมัติ และขออภัยที่แอปที่เป็นอันตรายซึ่งออกแบบมาเพื่อสร้างรายได้จากโฆษณาที่เป็นการฉ้อโกงอาจใช้ความสามารถนี้ในทางที่ผิดได้
วิธีลดปัญหานี้
หากคุณใช้หรือทำงานร่วมกับผู้ให้บริการโฆษณาดิจิทัลบุคคลที่สาม (เช่น เครือข่ายโฆษณาหรือแพลตฟอร์มฝั่งดีมานด์) เราขอแนะนำให้ใช้โฆษณาทดสอบแทนโฆษณาจริงในระหว่างการพัฒนาและทดสอบแอป
หากคุณต้องใช้โฆษณาจริงในการทดสอบ ให้แจ้งผู้ให้บริการโฆษณาดิจิทัลที่คุณทำงานด้วยเพื่อกรองรายได้และการเข้าชมที่เกี่ยวข้องทั้งหมดซึ่งสร้างจาก Test Lab โดยใช้บล็อกที่อยู่ IP ด้านล่าง คุณไม่จำเป็นต้องแจ้งผู้ให้บริการโฆษณาที่ Google เป็นเจ้าของ Test Lab จะดูแลเรื่องนี้ให้คุณ
ที่อยู่ IP ใช้โดยอุปกรณ์ Test Lab
การจราจรของข้อมูลในเครือข่ายทั้งหมดที่สร้างโดยอุปกรณ์ Test Lab จะมาจากการบล็อกที่อยู่ IP ต่อไปนี้
คุณยังเข้าถึงรายการนี้โดยใช้คำสั่ง gcloud beta firebase test ip-blocks list ใน gcloud CLI ได้ด้วย รายการนี้จะได้รับการอัปเดตโดยเฉลี่ย
ปีละครั้ง
| แพลตฟอร์มและประเภทอุปกรณ์ | บล็อกที่อยู่ IP ของ CIDR |
|---|---|
| อุปกรณ์จริงของ Android และ iOS, เปิดระบบอุปกรณ์เสมือน |
70.32.128.0/19 (เพิ่มเมื่อ 02-2022) 108.177.6.0/23 108.177.18.192/26 (เพิ่มเมื่อ 02-2022) 108.177.29.64/27 (ขยายเมื่อ 02-2022) 108.177.31.160/27 (เพิ่มเมื่อ 02-2022) 199.36.156.8/29 (เพิ่มเมื่อ 02-2022) 199.36.156.16/28 (เพิ่มเมื่อ 02-2022) 209.85.131.0/27 (เพิ่มเมื่อ 02-2022) 2001:4860:1008::/48 (เพิ่มมา 02-2022) 2001:4860:1018::/48 (เพิ่มมา 02-2022) 2001:4860:1019::/48 (เพิ่มมา 02-2022) 2001:4860:1020::/48 (เพิ่มมา 02-2022) 2001:4860:1022::/48 (เพิ่มมา 02-2022) 70.32.128.48/28 (เพิ่มเมื่อ 04-2024) |
| อุปกรณ์เสมือน Android (ไม่ใช่อุปกรณ์ทดสอบ) |
34.68.194.64/29 (เพิ่มเมื่อ 11-2019) 34.69.234.64/29 (เพิ่มเมื่อ 11-2019) 34.73.34.72/29 (เพิ่มเมื่อ 11-2019) 34.73.178.72/29 (เพิ่มเมื่อ 11-2019) 34.74.10.72/29 (เพิ่มเมื่อ 02-2022) 34.136.2.136/29 (เพิ่มเมื่อ 02-2022) 34.136.50.136/29 (เพิ่มเมื่อ 02-2022) 34.145.234.144/29 (เพิ่มเมื่อ 02-2022) 35.192.160.56/29 35.196.166.80/29 35.196.169.240/29 35.203.128.0/28 35.234.176.160/28 35.243.2.0/27 (เพิ่มเมื่อ 7-2019) 35.245.243.240/29 (เพิ่มเมื่อ 02-2022) 199.192.115.0/30 199.192.115.8/30 199.192.115.16/29 |
| ไม่ได้ใช้การบล็อก IP ของอุปกรณ์อีกต่อไป |
74.125.122.32/29 (นำออกแล้ว 02-2022) 216.239.44.24/29 (นำออกแล้ว 02-2022) |