Firebase is back at Google I/O on May 10! Register now

開始使用 Firebase 測試實驗室測試 Android

透過集合功能整理內容 你可以依據偏好儲存及分類內容。

Firebase 測試實驗室可讓您在一系列設備和配置上測試您的應用。本入門指南提供了一個實施路徑供您遵循,並介紹了 Test Lab 的 Android 產品。

有關測試實驗室配額和定價計劃的信息,請參閱使用情況、配額和定價

關鍵概念

當您針對您選擇的設備和配置運行測試或一組測試用例時,測試實驗室會針對您的應用程序批量運行測試,然後將結果顯示為測試矩陣

設備 × 測試執行 = 測試矩陣

設備
您運行測試的物理或虛擬設備(僅限 Android),例如手機、平板電腦或可穿戴設備。測試矩陣中的設備由設備型號、操作系統版本、屏幕方向和區域設置(也稱為地理和語言設置)標識。
測試,測試執行
要在設備上運行的測試(或一組測試用例)。您可以在每台設備上運行一個測試,或者選擇對測試進行分片並在不同設備上運行其測試用例。
測試矩陣
包含測試執行的狀態和測試結果。如果矩陣中的任何測試執行失敗,則整個矩陣失敗。

第 1 步:準備要上傳到測試實驗室的測試

可用的測試類型

您可以使用測試實驗室運行以下測試。請注意,所有測試類型僅限於在物理設備上運行 45 分鐘,在虛擬設備上運行 60 分鐘。任何未捕獲的異常都會導致測試失敗。

  • 插樁測試或插樁單元測試:您使用EspressoUI Automator框架編寫的測試。通過此測試,您可以對應用程序的狀態做出明確斷言,以使用AndroidJUnitRunnerAPIs驗證功能是否正確。

  • Robo 測試:一種自動化測試,可分析應用的 UI,然後通過模擬用戶活動有條不紊地探索它,無需您編寫任何代碼。有關詳細信息,請訪問關於 Robo 測試

  • 遊戲循環測試:使用“演示模式”模擬玩家在遊戲應用程序中的操作的測試。這是一種快速且可擴展的方式來驗證您的遊戲是否對用戶表現良好。當您選擇運行遊戲循環測試時,您可以:

    • 為您的遊戲引擎編寫原生測試

    • 避免為不同的 UI 或測試框架編寫相同的代碼

    • (可選)創建多個循環以在單個測試執行中運行(訪問關於遊戲循環測試以了解更多信息)。您還可以使用標籤來組織循環,這樣您就可以跟踪它們並重新運行特定的循環。

    有關使用測試實驗室運行此測試的說明,請參閱運行遊戲循環測試

運行測試的工具

您可以選擇以下工具來運行測試:

  • 推薦給初次使用的用戶:Firebase 控制台可讓您上傳應用程序並從網絡瀏覽器啟動測試。有關使用此工具運行測試的說明,請參閱使用 Firebase 控制台進行測試。

  • Android Studio 集成讓您無需離開開發環境即可測試您的應用。有關使用此工具運行測試的說明,請參閱使用 Android Studio進行測試。

  • gcloud 命令行界面使您能夠以交互方式從命令行運行測試,也非常適合將腳本編寫為自動化構建和測試過程的一部分。有關使用此工具運行測試的說明,請參閱使用 gcloud CLI進行測試。

當您使用 alpha 或 beta 渠道將應用的 APK 文件上傳並發佈到 Play 商店時,您還可以使用測試實驗室免費測試您的應用。有關更多信息,請參閱使用發布前報告來識別問題Robo 測試

第 2 步:選擇您的測試設備

測試實驗室支持在 Google 數據中心安裝和運行的多個品牌和型號的 Android 設備上進行測試。在測試實驗室中對設備進行測試可幫助您檢測在 Android Studio 中使用模擬器測試您的應用時可能不會出現的問題。要了解更多信息,請參閱可用設備。

第 3 步:查看測試結果

無論您如何啟動測試,您的所有測試結果都由測試實驗室管理,並且可以在線查看。

測試結果摘要會自動存儲並可以在 Firebase 控制台中查看。它包含與您的測試最相關的數據,包括特定於測試用例的視頻、屏幕截圖、通過、失敗或得到不穩定結果的測試數量,等等。

原始測試結果包含測試日誌和應用程序故障詳細信息,並自動存儲在 Google Cloud 存儲桶中。如果指定存儲桶,則存儲費用由您負責。如果您未指定存儲桶,Test Lab 會免費為您創建一個。

有關詳細信息,請參閱分析 Firebase 測試實驗室結果。

當您從Android Studio啟動測試時,您還可以從您的開發環境內部查看測試結果。

設備清理

Google 非常重視您的應用數據的安全性。我們遵循行業標準的最佳實踐,在每次測試運行後刪除應用程序數據並重置物理設備的系統設置,以確保它們已準備好運行新測試。對於我們可以使用自定義恢復映像進行刷寫的設備,我們更進一步,在測試運行之間對這些設備進行刷寫。

對於測試實驗室使用的虛擬設備,設備實例在使用後被刪除,以便每次測試運行都使用一個新的虛擬設備實例。


測試實驗室和 Google Play 服務

測試實驗室設備通常在最新版本的 Google Play 服務 SDK 上運行,但有些設備可能需要在新版本 SDK 發布後幾天才能更新。請注意,您可能會遇到某些設備的兼容性問題。

允許測試設備訪問私有後端服務器

一些移動應用程序需要與私有後端服務通信才能在測試期間正常運行。如果您的後端服務器受防火牆規則保護,您可以使用下面的 IP 地址塊打開通過防火牆的路由,從而允許訪問 Test Lab 的物理和虛擬設備。

移動廣告

測試實驗室提供了一個可擴展的基礎架構,可自動執行應用程序測試,不幸的是,此功能可能會被旨在產生欺詐性廣告收入的惡意應用程序濫用。

要緩解此問題:

  • 如果您使用或與第三方數字廣告提供商(例如,廣告網絡或需求方平台)合作,建議您在應用開發和測試期間使用測試廣告而不是真實廣告。

  • 如果您必須在測試中使用真實廣告,請通知與您合作的數字廣告提供商使用以下IP 地址塊過濾掉測試實驗室產生的收入和所有相應流量。您無需通知 Google 擁有的廣告提供商; Test Lab 會為您解決這個問題。

測試實驗室設備使用的 IP 地址

測試實驗室設備生成的所有網絡流量都源自以下IP 地址塊。您還可以在gcloud CLI 中使用gcloud beta firebase test ip-blocks list命令訪問此列表。該名單平均每年更新一次。

平台和設備類型CIDR IP 地址塊
Android 和 iOS 物理設備

70.32.128.0/19(添加於 02-2022)

108.177.6.0/23

108.177.18.192/26(添加於 02-2022)

108.177.29.64/27(擴展 02-2022)

108.177.31.160/27(02-2022 添加)

199.36.156.8/29(添加 02-2022)

199.36.156.16/28(02-2022 添加)

209.85.131.0/27(添加 02-2022)

2001:4860:1008::/48(添加到 02-2022)

2001:4860:1018::/48(添加到 02-2022)

2001:4860:1019::/48(添加到 02-2022)

2001:4860:1020::/48(添加到 02-2022)

2001:4860:1022::/48(添加到 02-2022)

安卓虛擬設備

34.68.194.64/29(2019 年 11 月新增)

34.69.234.64/29(2019 年 11 月新增)

34.73.34.72/29(添加於 11-2019)

34.73.178.72/29(2019 年 11 月新增)

34.74.10.72/29(添加於 02-2022)

34.136.2.136/29(添加於 02-2022)

34.136.50.136/29(添加於 02-2022)

34.145.234.144/29(添加於 02-2022)

35.192.160.56/29

35.196.166.80/29

35.196.169.240/29

35.203.128.0/28

35.234.176.160/28

35.243.2.0/27(7-2019 添加)

35.245.243.240/29(添加於 02-2022)

199.192.115.0/30

199.192.115.8/30

199.192.115.16/29

不再使用設備 IP 塊

74.125.122.32/29(2022 年 2 月刪除)

216.239.44.24/29(2022 年 2 月刪除)