Как провести тестирование в реальных условиях

Полевое испытание будет проходить в два основных этапа:

1. Планирование полевых испытаний
2. Проведение полевого испытания

Планирование полевых испытаний

Планирование Field Trial включает следующие шаги:

1. Пригласите пользователей

   • Определите пользователей для полевых испытаний.
   • Соберите контактные данные и информацию о доставке.

2. Создайте страницу в Справочном центре со следующей информацией:

   • Сведения о проекте
   • Известные проблемы и ошибки
   • Ссылки на скачивание Google Home app (GHA) и ваших приложений.
   • Инструкции по настройке, обучающие видео
   • Что можно сделать
   • Инструкции по сбросу настроек устройства до заводских
   • Как устранить неполадки
   • Ссылка на опрос

Запустите полевое испытание

Первый этап работы с Field Trial – настройка в Google Home Developer Console и отправка на проверку на соблюдение правил Google. После того как Google одобрит его, вы сможете продолжить Field Trial.

Как настроить и отправить на проверку на соблюдение правил

Перейти в Developer Console

1. Перейдите в раздел Matter > Полевые испытания.

2. В списке Готово к проверке в рамках полевых испытаний выберите версию интеграции, которая будет использоваться в Field Trial, и нажмите Отправить.

   

3. Во всплывающем диалоговом окне введите адреса электронной почты пользователей, которые будут тестировать интеграцию. При желании нажмите Открыть шаблон, чтобы создать копию опроса Field Trial, которую можно настроить для своего продукта. Нажмите Отправить.

Ваш план Field Trial теперь указан в разделе Отправлено на проверку и отправлен в Google на проверку на соблюдение правил. Field Trial автоматически начнется после одобрения.

Проверка на соблюдение правил фокусируется на таких вещах, как название вашего устройства или название товара, изображения устройства и ссылки на видео.

Администрирование пробной версии

Когда Field Trial будет одобрен и появится в разделе Начато:

1. Создайте официальный канал связи с пользователями по электронной почте или в чате.

2. Отправьте устройства тестировщикам.

3. Отправьте тестировщикам ресурсы, например страницу Справочного центра и ссылку на опрос.

4. Поддержите тестировщиков:

   • Отвечать на вопросы и помогать решать проблемы, возникающие на местах.
   • Попросите пользователей делиться журналами, сообщать об ошибках и отправлять отзывы из GHA при возникновении проблем.

5. Отслеживайте данные на панелях управления и в журналах с помощью Google Cloud Monitoring dashboard (чтобы открыть этот инструмент, нажмите на ссылку Просмотр на странице Developer Console Управление проектами):

   • Отслеживайте успешность настройки, включая инициализацию, регистрацию и выполнение запросов.
   • Отслеживайте показатели взаимодействия, например количество активных пользователей за день (DAU) или неделю (WAU), или собственные специальные показатели.
   • Отслеживайте ошибки в журналах.

Изменить список тестировщиков

Список тестировщиков можно обновить для текущего Field Trial.

В разделе Начато нажмите Изменить список тестировщиков для версии интеграции. Откроется диалоговое окно, в котором можно изменить список тестировщиков. Нажмите Сохранить.

Как остановить полевое испытание

Чтобы остановить Field Trial:

Перейти в Developer Console

1. Перейдите в раздел Matter > Полевые испытания.
2. В разделе Запущенные выберите Field Trial, который нужно остановить.
3. Нажмите кнопку Остановить.

Field Trial должна появиться в разделе Завершенные.

Как перезапустить полевое испытание

Чтобы перезапустить Field Trial:

Перейти в Developer Console

1. Перейдите в раздел Matter > Полевые испытания.
2. В разделе Завершено выберите нужную кампанию типа Field Trial.
3. Нажмите кнопку Перезапустить.

Field Trial появится в разделе Начато.

Статусы в Play Console

На этапе Field Trial могут встречаться следующие статусы:

Section	Статус	Описание	Требования	Что нужно сделать
Готово к проверке (Field Trial)	Готово	Эту версию integration можно отправить на проверку Field Trial. Отозванные integrationтакже помечаются как готовые.	Для integrationдолжна быть указана версия.	Отправьте эту версию integration для Field Trial на проверку.
Отправлено на проверку.	На рассмотрении	Эта версия integration находится на проверке.	Отчет о финансовой транзакции отправлен.	Дождитесь одобрения версии, чтобы начать Field Trial. или При желании вы можете отказаться от участия.
Отправлено на проверку.	Отклонено	Эта версия integration не соответствует критериям проверки на соблюдение правил, поэтому Field Trial не может быть запущен.	Не выполнено несколько критериев (Field Trial).	Устраните проблемы в существующем integrationили создайте новую версию integration , которая соответствует критериям Field Trial, а затем свяжитесь с менеджером аккаунта и отправьте Field Trial на проверку. или Если вы не согласны с результатами проверки, вы можете оспорить их, обратившись к менеджеру аккаунта.
Начато	Начато	Эта версия приложения " integration " одобрена, и тестировщики могут начать работу.	Запрос Field Trial одобрен.	Отправьте информацию приглашенным тестировщикам. или Остановите полевое испытание.
Завершен	Завершено	Field Trial для этой версии остановлено, и тестировщики больше не могут участвовать.	Field Trial запуск.	При необходимости нажмите Restart Field Trial (Перезапустить полевое испытание).