Làm quen với kiểm thử Vòng lặp trò chơi

Có thể khó tự động hoá việc kiểm thử trò chơi khi các ứng dụng trò chơi được xây dựng trên nhiều khung giao diện người dùng. Kiểm thử Vòng lặp trò chơi cho phép bạn tích hợp các kiểm thử gốc với Test Lab và dễ dàng chạy các kiểm thử đó trên các thiết bị bạn chọn. Kiểm thử Vòng lặp trò chơi chạy kiểm thử thông qua ứng dụng trò chơi của bạn trong khi mô phỏng các hành động của người chơi thực. Hướng dẫn này sẽ hướng dẫn bạn cách chạy kiểm thử Vòng lặp trò chơi, sau đó xem và quản lý kết quả kiểm thử trong bảng điều khiển Firebase.

Tuỳ thuộc vào công cụ phát triển trò chơi, bạn có thể triển khai kiểm thử bằng một hoặc nhiều vòng lặp. Vòng lặp là một quá trình chạy toàn bộ hoặc một phần của quy trình kiểm thử trên ứng dụng trò chơi. Bạn có thể sử dụng vòng lặp trò chơi để:

  • Chạy một cấp độ của trò chơi theo cách người dùng cuối sẽ chơi. Bạn có thể viết tập lệnh cho dữ liệu đầu vào của người dùng, để người dùng ở trạng thái rảnh hoặc thay thế người dùng bằng AI nếu điều đó phù hợp với trò chơi của bạn (ví dụ: giả sử bạn có một ứng dụng trò chơi đua xe và đã triển khai AI. Bạn có thể dễ dàng đặt trình điều khiển AI phụ trách dữ liệu đầu vào của người dùng).
  • Chạy trò chơi ở chế độ cài đặt chất lượng cao nhất để xem thiết bị có hỗ trợ chế độ này hay không.
  • Chạy kiểm thử kỹ thuật (biên dịch nhiều chương trình đổ bóng, thực thi các chương trình đó, kiểm tra để đảm bảo kết quả như mong đợi, v.v.).

Bạn có thể chạy kiểm thử Vòng lặp trò chơi trên một thiết bị kiểm thử, một nhóm thiết bị kiểm thử hoặc trên Test Lab. Tuy nhiên, bạn không nên chạy kiểm thử Vòng lặp trò chơi trên các thiết bị ảo vì các thiết bị này có tốc độ khung hình đồ hoạ thấp hơn so với thiết bị thực.

Trước khi bắt đầu

Để triển khai kiểm thử, trước tiên, bạn phải định cấu hình ứng dụng cho các kiểm thử Vòng lặp trò chơi.

  1. Trong tệp kê khai ứng dụng, hãy thêm một bộ lọc ý định mới vào hoạt động:

    <activity android:name=".MyActivity">
   <intent-filter>
       <action android:name="com.google.intent.action.TEST_LOOP"/>
       <category android:name="android.intent.category.DEFAULT"/>
       <data android:mimeType="application/javascript"/>
   </intent-filter>
   <intent-filter>
      ... (other intent filters here)
   </intent-filter>
</activity>

    Điều này cho phép Test Lab chạy trò chơi bằng cách kích hoạt trò chơi bằng một ý định cụ thể.

  2. Trong mã của bạn (nên thêm bên trong phần khai báo phương thức onCreate), hãy thêm nội dung sau:

    Kotlin+KTX 

    val launchIntent = intent
if (launchIntent.action == "com.google.intent.action.TEST_LOOP") {
    val scenario = launchIntent.getIntExtra("scenario", 0)
    // Code to handle your game loop here
}
    MainActivity.kt

    Java 

    Intent launchIntent = getIntent();
if(launchIntent.getAction().equals("com.google.intent.action.TEST_LOOP")) {
    int scenario = launchIntent.getIntExtra("scenario", 0);
    // Code to handle your game loop here
}
    MainActivity.java

    Điều này cho phép hoạt động của bạn kiểm tra ý định khởi chạy hoạt động đó. Bạn cũng có thể thêm mã này sau nếu muốn (ví dụ: sau khi tải công cụ phát triển trò chơi ban đầu).

  3. Đề xuất: Ở cuối quy trình kiểm thử, hãy thêm:

    Kotlin+KTX 

    yourActivity.finish()
    MainActivity.kt

    Java 

    yourActivity.finish();
    MainActivity.java

    Thao tác này sẽ đóng ứng dụng của bạn khi kiểm thử Vòng lặp trò chơi hoàn tất. Quy trình kiểm thử này dựa vào khung giao diện người dùng của ứng dụng để bắt đầu vòng lặp tiếp theo và việc đóng ứng dụng sẽ cho biết quy trình kiểm thử đã hoàn tất.

Tạo và chạy kiểm thử Vòng lặp trò chơi

Sau khi định cấu hình ứng dụng cho các kiểm thử Vòng lặp trò chơi, bạn có thể tạo ngay một kiểm thử và chạy kiểm thử đó trong ứng dụng trò chơi. Bạn có thể chọn chạy kiểm thử trong Test Lab bằng bảng điều khiển Firebase hoặc giao diện dòng lệnh gcloud (CLI) hoặc trên thiết bị cục bộ bằng Trình quản lý vòng lặp kiểm thử.

Chạy trên thiết bị cục bộ

Trình quản lý vòng lặp kiểm thử của Test Lab là một ứng dụng nguồn mở giúp bạn tích hợp các kiểm thử Vòng lặp trò chơi và chạy các kiểm thử đó trên thiết bị cục bộ. Điều này cũng cho phép nhóm Đảm bảo chất lượng chạy cùng một vòng lặp trò chơi trên thiết bị của họ.

Cách chạy kiểm thử trên thiết bị cục bộ bằng Trình quản lý vòng lặp kiểm thử:

  1. Tải Test Loop Manager xuống điện thoại hoặc máy tính bảng rồi cài đặt bằng cách chạy:
    adb install testloopmanager.apk
  2. Trên thiết bị, hãy mở ứng dụng Test Loop Apps (Kiểm thử ứng dụng vòng lặp) trên điện thoại hoặc máy tính bảng. Ứng dụng này hiển thị danh sách các ứng dụng trên thiết bị của bạn có thể chạy bằng vòng lặp trò chơi. Nếu bạn không thấy ứng dụng trò chơi của mình ở đây, hãy đảm bảo bộ lọc ý định của bạn khớp với bộ lọc được mô tả trong bước đầu tiên của phần Trước khi bắt đầu.
  3. Chọn ứng dụng trò chơi, sau đó chọn số vòng lặp bạn muốn chạy. Lưu ý: Ở bước này, bạn có thể chọn chạy một tập hợp con của các vòng lặp thay vì chỉ một vòng lặp. Để biết thêm thông tin về cách chạy nhiều vòng lặp cùng một lúc, hãy xem phần Các tính năng không bắt buộc.
  4. Nhấp vào Run test (Chạy kiểm thử). Kiểm thử của bạn sẽ bắt đầu chạy ngay lập tức.

Chạy trong Test Lab

Bạn có thể chạy kiểm thử Vòng lặp trò chơi trong Test Lab bằng bảng điều khiển Firebase hoặc CLI gcloud. Trước khi bắt đầu, nếu bạn chưa mở, hãy mở bảng điều khiển Firebase và tạo một dự án.

Sử dụng bảng điều khiển Firebase

  1. Trong bảng điều khiển Firebase, hãy nhấp vào biểu tượng Test Lab ở bảng điều khiển bên trái.
  2. Nhấp vào Run Your First Test (Chạy kiểm thử đầu tiên) (hoặc Run a Test (Chạy kiểm thử) nếu dự án của bạn đã chạy kiểm thử trước đó).
  3. Chọn Vòng lặp trò chơi làm loại kiểm thử, rồi nhấp vào Tiếp tục.
  4. Nhấp vào Browse (Duyệt qua), rồi duyệt đến tệp .apk của ứng dụng. Lưu ý: Ở bước này, bạn có thể chọn chạy một tập hợp con của các vòng lặp thay vì chỉ một vòng lặp. Để biết thêm thông tin về cách chạy nhiều vòng lặp cùng một lúc, hãy xem phần Các tính năng không bắt buộc.
  5. Nhấp vào Tiếp tục.
  6. Chọn thiết bị thực để dùng thử nghiệm ứng dụng.
  7. Nhấp vào Bắt đầu kiểm thử.

Để biết thêm thông tin về cách bắt đầu sử dụng bảng điều khiển Firebase, hãy xem phần Bắt đầu kiểm thử bằng bảng điều khiển Firebase.

Sử dụng dòng lệnh (CLI) gcloud

  1. Tải và cài đặt Google Cloud SDK nếu bạn chưa có

  2. Đăng nhập vào CLI gcloud bằng Tài khoản Google của bạn:

    gcloud auth login

  3. Thiết lập dự án Firebase trong gcloud, trong đó PROJECT_ID là mã nhận dạng của dự án Firebase:

    gcloud config set project PROJECT_ID

  4. Chạy kiểm thử đầu tiên:

    gcloud firebase test android run \
 --type=game-loop --app=<var>path-to-apk</var> \
 --device model=herolte,version=23

Để biết thêm thông tin về cách bắt đầu sử dụng CLI gcloud, hãy xem phần Bắt đầu kiểm thử từ dòng lệnh gcloud.

Các tính năng không bắt buộc

Test Lab cung cấp một số tính năng không bắt buộc cho phép bạn tuỳ chỉnh thêm các bài kiểm thử, bao gồm cả khả năng ghi dữ liệu đầu ra, hỗ trợ nhiều vòng lặp trò chơi và nhãn cho các vòng lặp có liên quan.

Ghi dữ liệu đầu ra

Kiểm thử Vòng lặp trò chơi có thể ghi đầu ra vào một tệp được chỉ định trong phương thức launchIntent.getData(). Sau khi chạy một chương trình kiểm thử, bạn có thể truy cập vào dữ liệu đầu ra này trong phần Test Lab của bảng điều khiển Firebase (xem Ví dụ về tệp đầu ra kiểm thử Vòng lặp trò chơi).

Test Lab tuân theo các phương pháp hay nhất để chia sẻ tệp giữa các ứng dụng được mô tả trong phần Chia sẻ tệp. Trong phương thức onCreate() của hoạt động, nơi chứa ý định, bạn có thể kiểm tra tệp đầu ra dữ liệu bằng cách chạy mã sau:

Kotlin+KTX 

val launchIntent = intent
val logFile = launchIntent.data
logFile?.let {
    Log.i(TAG, "Log file ${it.encodedPath}")
    // ...
}
MainActivity.kt

Java 

Intent launchIntent = getIntent();
Uri logFile = launchIntent.getData();
if (logFile != null) {
    Log.i(TAG, "Log file " + logFile.getEncodedPath());
    // ...
}
MainActivity.java

Nếu muốn ghi vào tệp từ phía C++ của ứng dụng trò chơi, bạn có thể truyền vào chỉ số mô tả tệp thay vì đường dẫn tệp:

Kotlin+KTX 

val launchIntent = intent
val logFile = launchIntent.data
var fd = -1
logFile?.let {
    Log.i(TAG, "Log file ${it.encodedPath}")
    fd = try {
        contentResolver
            .openAssetFileDescriptor(logFile, "w")!!
            .parcelFileDescriptor
            .fd
    } catch (e: FileNotFoundException) {
        e.printStackTrace()
        -1
    } catch (e: NullPointerException) {
        e.printStackTrace()
        -1
    }
}

// C++ code invoked here.
// native_function(fd);
MainActivity.kt

Java 

Intent launchIntent = getIntent();
Uri logFile = launchIntent.getData();
int fd = -1;
if (logFile != null) {
    Log.i(TAG, "Log file " + logFile.getEncodedPath());
    try {
        fd = getContentResolver()
                .openAssetFileDescriptor(logFile, "w")
                .getParcelFileDescriptor()
                .getFd();
    } catch (FileNotFoundException e) {
        e.printStackTrace();
        fd = -1;
    } catch (NullPointerException e) {
        e.printStackTrace();
        fd = -1;
    }
}

// C++ code invoked here.
// native_function(fd);
MainActivity.java

C++

#include <unistd.h>
JNIEXPORT void JNICALL
Java_my_package_name_MyActivity_native_function(JNIEnv *env, jclass type, jint log_file_descriptor) {
// The file descriptor needs to be duplicated.
int my_file_descriptor = dup(log_file_descriptor);
}

Ví dụ về tệp đầu ra

Bạn có thể sử dụng các tệp dữ liệu đầu ra (được định dạng như ví dụ bên dưới) để hiển thị kết quả kiểm thử vòng lặp trò chơi trong phần Test Lab của bảng điều khiển Firebase. Các vùng hiển thị dưới dạng /.../ có thể chứa bất kỳ trường tuỳ chỉnh nào mà bạn cần, miễn là các trường đó không xung đột với tên của các trường khác dùng trong tệp này:

{
  "name": "test name",
  "start_timestamp": 0, // Timestamp of the test start (in us).
                           Can be absolute or relative
  "driver_info": "...",
  "frame_stats": [
    {
      "timestamp": 1200000, // Timestamp at which this section was written
                               It contains value regarding the period
                               start_timestamp(0) -> this timestamp (1200000 us)
      "avg_frame_time": 15320, // Average time to render a frame in ns
      "nb_swap": 52, // Number of frame rendered
      "threads": [
        {
          "name": "physics",
          "Avg_time": 8030 // Average time spent in this thread per frame in us
        },
        {
          "name": "AI",
          "Avg_time": 2030 // Average time spent in this thread per frame in us
        }
      ],
      /.../ // Any custom field you want (vertices display on the screen, nb units …)
    },
    {
      // Next frame data here, same format as above
    }
  ],
  "loading_stats": [
    {
      "name": "assets_level_1",
      "total_time": 7850, // in us
      /.../
    },
    {
      "name": "victory_screen",
      "total_time": 554, // in us
      /.../
    }

  ],
  /.../, // You can add custom fields here
}

Nhiều vòng lặp trò chơi

Bạn có thể thấy hữu ích khi chạy nhiều vòng lặp trò chơi trong ứng dụng. Vòng lặp là một quá trình chạy hoàn chỉnh ứng dụng trò chơi của bạn từ đầu đến cuối. Ví dụ: nếu trò chơi của bạn có nhiều cấp, bạn nên có một vòng lặp trò chơi để khởi chạy từng cấp thay vì có một vòng lặp lặp lại tất cả các cấp. Bằng cách đó, nếu ứng dụng của bạn gặp sự cố ở cấp 32, bạn có thể trực tiếp chạy vòng lặp trò chơi đó để tái hiện sự cố và kiểm thử bản sửa lỗi.

Cách cho phép ứng dụng chạy nhiều vòng lặp cùng một lúc:

  • Nếu bạn đang chạy kiểm thử bằng Trình quản lý vòng lặp kiểm thử:

    1. Thêm dòng sau vào tệp kê khai của ứng dụng, bên trong phần tử <application>:

      <meta-data
  android:name="com.google.test.loops"
  android:value="5" />

      Ý định khởi chạy này chứa vòng lặp mục tiêu dưới dạng tham số số nguyên. Trong trường android:value, bạn có thể chỉ định một số nguyên từ 1 đến 1024 (số vòng lặp tối đa được phép cho một lần kiểm thử). Lưu ý rằng các vòng lặp được lập chỉ mục bắt đầu từ 1, chứ không phải 0.

    2. Trong ứng dụng Test Loop Manager (Trình quản lý vòng lặp kiểm thử), một màn hình lựa chọn sẽ xuất hiện để cho phép bạn chọn (các) vòng lặp mà bạn muốn chạy. Nếu bạn chọn nhiều vòng lặp, thì mỗi vòng lặp sẽ được khởi chạy theo trình tự sau khi vòng lặp trước đó hoàn tất.

  • Nếu bạn đang chạy kiểm thử bằng bảng điều khiển Firebase, hãy nhập một danh sách hoặc một phạm vi số vòng lặp trong trường Scenarios (Tình huống).

  • Nếu bạn đang chạy kiểm thử bằng CLI gcloud, hãy chỉ định danh sách số vòng lặp bằng cách sử dụng cờ --scenario-numbers. Ví dụ: --scenario-numbers=1,3,5 chạy các vòng lặp 1, 3 và 5.

  • Nếu bạn đang viết C++ và muốn thay đổi hành vi của vòng lặp, hãy truyền thêm mã sau vào mã C++ gốc:

    Kotlin+KTX 

    val launchIntent = intent
val scenario = launchIntent.getIntExtra("scenario", 0)
    MainActivity.kt

    Java 

    Intent launchIntent = getIntent();
int scenario = launchIntent.getIntExtra("scenario", 0);
    MainActivity.java

    Giờ đây, bạn có thể thay đổi hành vi của vòng lặp dựa trên giá trị int thu được.

Gắn nhãn vòng lặp trò chơi

Khi gắn nhãn vòng lặp trò chơi bằng một hoặc nhiều nhãn tình huống, bạn và nhóm đảm bảo chất lượng có thể dễ dàng khởi chạy một tập hợp các vòng lặp trò chơi có liên quan (ví dụ: "tất cả vòng lặp trò chơi về khả năng tương thích") và kiểm thử chúng trong một ma trận duy nhất. Bạn có thể tạo nhãn của riêng mình hoặc sử dụng các nhãn được xác định trước do Test Lab cung cấp:

  • com.google.test.loops.player_experience: Đối với các vòng lặp dùng để tái tạo trải nghiệm của người dùng thực khi chơi trò chơi. Mục tiêu của việc kiểm thử bằng các vòng lặp này là tìm ra những vấn đề mà người dùng thực sẽ gặp phải trong khi chơi trò chơi.
  • com.google.test.loops.gpu_compatibility: Vòng lặp For dùng để kiểm thử các vấn đề liên quan đến GPU. Mục tiêu của việc kiểm thử bằng các vòng lặp này là thực thi mã GPU có thể không chạy đúng cách trong bản phát hành chính thức, để phát hiện các vấn đề về phần cứng và trình điều khiển.
  • com.google.test.loops.compatibility: Vòng lặp For dùng để kiểm thử nhiều vấn đề về khả năng tương thích, bao gồm cả các vấn đề về I/O và OpenSSL.
  • com.google.test.loops.performance: Vòng lặp For dùng để kiểm thử hiệu suất của thiết bị. Ví dụ: một trò chơi có thể chạy ở chế độ cài đặt đồ hoạ phức tạp nhất để xem thiết bị mới hoạt động như thế nào.

Cách cho phép ứng dụng chạy các vòng lặp có cùng nhãn:

  • Nếu bạn đang chạy kiểm thử bằng Trình quản lý vòng lặp kiểm thử:

    1. Trong tệp kê khai của ứng dụng, hãy thêm dòng siêu dữ liệu sau và thay thế LABEL_NAME bằng nhãn mà bạn chọn:

      <meta-data
 android:name="com.google.test.loops.LABEL_NAME"
 android:value="1,3-5" />

      Trong trường android:value, bạn có thể chỉ định một dải hoặc một tập hợp số nguyên từ 1 đến 1024 (số vòng lặp tối đa được phép cho một lần kiểm thử) đại diện cho các vòng lặp mà bạn muốn gắn nhãn. Xin lưu ý rằng các vòng lặp được lập chỉ mục bắt đầu từ 1, chứ không phải 0. Ví dụ: android:value="1,3-5" áp dụng LABEL_NAME cho các vòng lặp 1, 3, 4 và 5.

    2. Trong ứng dụng Trình quản lý vòng lặp kiểm thử, hãy nhập một hoặc nhiều nhãn vào trường Nhãn.

  • Nếu bạn đang chạy kiểm thử bằng bảng điều khiển Firebase, hãy nhập một hoặc nhiều nhãn vào trường Nhãn.

  • Nếu bạn đang chạy kiểm thử bằng CLI gcloud, hãy chỉ định một hoặc nhiều nhãn tình huống bằng cách sử dụng cờ --scenario-labels (ví dụ: --scenario-labels=performance,gpu).

Hỗ trợ cấp phép ứng dụng

Test Lab hỗ trợ các ứng dụng sử dụng dịch vụ Cấp phép ứng dụng do Google Play cung cấp. Để kiểm tra giấy phép thành công khi kiểm thử ứng dụng bằng Test Lab, bạn phải phát hành ứng dụng lên kênh phát hành công khai trong Cửa hàng Play. Để kiểm thử ứng dụng trong kênh alpha hoặc beta bằng Test Lab, hãy xoá quy trình kiểm tra cấp phép trước khi tải ứng dụng lên Test Lab.

Các vấn đề đã biết

Các kiểm thử Vòng lặp trò chơi trong Test Lab có các vấn đề đã biết sau:

  • Một số sự cố không hỗ trợ tính năng theo dõi ngược. Ví dụ: một số bản phát hành có thể bịt đầu ra của quy trình debuggerd bằng cách sử dụng prctl(PR_SET_DUMPABLE, 0). Để tìm hiểu thêm, hãy xem debuggerd.
  • API cấp 19 hiện không được hỗ trợ do lỗi quyền đối với tệp.