A/B test biểu tượng

Quan trọng

Mục A/B-testing chỉ xuất hiện với những trò chơi đã được công bố. Nếu trò chơi đó có một bản nháp, hãy công bố hoặc xóa bản nháp đó để có thể thử nghiệm các biểu tượng.

Biểu tượng và trang bìa của trò chơi có ý nghĩa quan trọng trong việc tạo lưu lượng truy cập từ danh mục – nội dung sáng tạo được lựa chọn kỹ lưỡng và bắt mắt có nhiều khả năng thu hút sự chú ý của người dùng. Để có được sự hiểu biết về biểu tượng và trang bìa nào sẽ tạo ra kết quả tốt nhất cho dự án của bạn, hãy chạy thử nghiệm A/B cho mỗi nội dung sáng tạo. Người dùng danh mục sẽ được chia tự động thành hai nhóm:

  • 50% người dùng sẽ thấy tài liệu từ nhóm đối chứng.
  • 50% người dùng sẽ thấy tài liệu từ nhóm thử nghiệm.

Hãy chờ đợi một vài ngày và chuyển sang tab A/B icon test trong Bảng điều khiển Yandex Games. Ở đó, bạn sẽ tìm thấy dữ liệu sơ bộ cho thấy biểu tượng và trang bìa thử nghiệm ảnh hưởng như thế nào đến tỷ lệ chuyển đổi danh mục và các chỉ số trong trò chơi.

Ghi chú

Mã dưới đây được viết bằng ngôn ngữ lập trình markdown. Mã cụ thể:

Để kiểm tra trên các đối tượng khán giả khác nhau, có ba loại đơn đăng ký được cung cấp:

  • Toàn bộ khán giả — cho phép kiểm tra các sáng tạo cho tất cả ngôn ngữ của bản nháp và trên toàn bộ khán giả của danh mục. Việc chấp nhận thí nghiệm trên một phần của khán giả có sẵn. Đây là lựa chọn được khuyến nghị về mặt linh hoạt và đầy đủ.

  • Khán giả nói tiếng Nga — chỉ những người dùng với giao diện trình duyệt bằng tiếng Nga mới thấy các sáng tạo thử nghiệm.

  • Khán giả quốc tế — cho phép kiểm tra các sáng tạo cho tất cả ngôn ngữ của bản nháp, trừ tiếng Nga. Trong danh mục, khoảng 15% là khán giả quốc tế.

Chạy thử nghiệm A/B

Bước 1. Chuẩn bị tài liệu quảng cáo

Chuẩn bị một biểu tượng và trang bìa mới, đảm bảo chúng đáp ứng các yêu cầu được quy định tại điều khoản 8.3.

Bước 2. Tạo yêu cầu

  1. Mở Bảng điều khiển Yandex Games.

  2. Chọn trò chơi mà bạn muốn.

  3. Chuyển đến A/B icon test.

  4. Chọn đối tượng mà bạn muốn tạo yêu cầu.

    Ghi chú

    Kiểm thử trên toàn bộ đối tượng — phương pháp kiểm thử sáng tạo được khuyến nghị vì sự linh hoạt của nó.

  5. Nhấp vào Go to request.

Bước 3. Tải tệp lên

Nhấp vào Upload để đính kèm một biểu tượng và trang bìa thử nghiệm.

Nếu bạn đang kiểm tra các thiết kế sáng tạo cho nhiều ngôn ngữ cùng một lúc và dự định sử dụng cùng một hình ảnh, bạn có thể tăng tốc độ tải lên tệp bằng cách sử dụng tùy chọn Apply icon and cover for other languages (mặc định là bật):

  1. Tải lên biểu tượng và ảnh bìa cho phiên bản trên cùng. Chúng sẽ tự động được áp dụng cho tất cả ngôn ngữ.
  2. Nếu cần, thay đổi biểu tượng và ảnh bìa cho các ngôn ngữ cụ thể riêng biệt.

Bước 4. Gửi trò chơi để kiểm duyệt

Nhấp vào Submit for moderation.

Ghi chú

Bạn có thể thu hồi yêu cầu kiểm duyệt trong vòng 15 phút đầu tiên sau khi gửi.

Đánh giá kết quả

Để xem kết quả:

  1. Mở Bảng điều khiển Yandex Games.

  2. Chọn trò chơi mà bạn muốn.

  3. Chuyển đến A/B icon test.

Quan trọng

Thời gian giới hạn cho thí nghiệm là 14 ngày.

Trên đầu trang hiển thị ngày bắt đầu thí nghiệm và ngày nó sẽ tự động kết thúc.

Kết quả kiểm tra đầu tiên sẽ xuất hiện sau vài ngày. Để đạt được kết quả có ý nghĩa thống kê, hãy tiến hành thí nghiệm ít nhất một tuần.

Để so sánh các creative, các chỉ số được sử dụng:

  • Icon CTR in recommendations
  • Cover CTR in recommendations
  • Icon CTR in "My games"
  • Conversion To Play
  • Players
  • Play time per player
  • Play time

Nếu các chỉ số được tô màu:

  • Xanh lá cây, kết quả là tích cực và có ý nghĩa về mặt thống kê.
  • Đỏ, kết quả là tiêu cực và có ý nghĩa về mặt thống kê.

Nếu các thước đo không được tô màu bất kỳ cách nào, không thể kết luận rằng thí nghiệm có ảnh hưởng đến người dùng hay không.

Ra quyết định

Quan trọng

Để có kết quả có ý nghĩa thống kê, cần duy trì thí nghiệm ít nhất 7 ngày để tính đến sự thay đổi của hoạt động của người chơi trong suốt tuần. Nếu thử nghiệm kéo dài hơn một tuần, bạn có thể bắt đầu quyết định về thí nghiệm.

  1. Mở Bảng điều khiển Yandex Games.

  2. Chọn trò chơi mà bạn muốn.

  3. Chuyển đến A/B icon test.

  4. Xem lại các chỉ số thử nghiệm và ra quyết định dựa trên màu của chỉ số:

    • Xanh lá cây: Nhấp vào Accept the experiment để sử dụng biểu tượng và trang bìa thử nghiệm làm mặc định.

      Ghi chú

      Bạn có thể chọn áp dụng thí nghiệm cho nhóm khán giả nào tùy thuộc vào kết quả của nó. Ví dụ, nếu các chỉ số giảm đối với người chơi nói tiếng Nga, nhưng không phải với người chơi quốc tế, hãy sử dụng các thiết kế thử nghiệm chỉ cho khán giả quốc tế. Trong trường hợp này, không cần cập nhật bản nháp thêm.

    • Đỏ: Nhấp vào Stop để kết thúc thử nghiệm. Việc kiểm tra sẽ tự động kết thúc sau 14 ngày.

Lời khuyên

Thỉnh thoảng hãy thử nghiệm lại các mẫu quảng cáo để theo dõi sự thay đổi trong sở thích của người dùng, xu hướng thị trường và biến động theo mùa.

90% khả năng rằng sự cải thiện về chỉ số có liên quan đến sự thay đổi về biểu tượng hoặc trang bìa.

90% khả năng rằng sự suy giảm về chỉ số có liên quan đến sự thay đổi về biểu tượng hoặc trang bìa.