Lancer une évaluation pratique

Votre essai sur le terrain se déroulera en deux phases principales :

  1. Planifier l'essai sur le terrain
  2. Exécuter l'expérience pratique

Planifier le test en conditions réelles

La planification d'un Field Trial implique les étapes suivantes :

  1. Recruter des utilisateurs

    • Identifiez les utilisateurs pour les tests sur le terrain.
    • Collectez les informations de livraison et les coordonnées.
  2. Créez une page d'aide contenant les informations suivantes :

    • Détails des projets
    • Problèmes/bugs connus
    • Liens pour télécharger le Google Home app (GHA) ainsi que votre ou vos applications
    • Instructions de configuration, vidéos d'instructions
    • Solutions possibles
    • Instructions pour rétablir la configuration d'usine de l'appareil
    • Procédure de dépannage
    • Lien vers l'enquête

Exécuter la phase de tests

La première étape pour diffuser votre Field Trial consiste à la configurer sur Google Home Developer Console et à l'envoyer à Google pour vérification du respect des règles. Une fois que Google l'aura approuvé, vous pourrez procéder à la Field Trial.

Configurer et envoyer pour vérification du respect des règles

Accéder à la Developer Console

  1. Accédez à Matter > Field Trial (Essai sur le terrain).

  2. Dans la liste Prêt pour l'examen du test en conditions réelles, sélectionnez la version d'intégration qui fera l'objet du Field Trial, puis cliquez sur Envoyer.

    Prêt pour le test en conditions réelles

  3. Dans la boîte de dialogue pop-up, saisissez les adresses e-mail des utilisateurs qui testeront votre intégration sur le terrain. Si vous le souhaitez, cliquez sur Ouvrir le modèle pour créer une copie d'une enquête Field Trial que vous pouvez personnaliser pour votre produit. Lorsque vous êtes prêt, cliquez sur Envoyer.

Votre plan Field Trial est désormais listé dans la section Envoyé pour examen et est envoyé à Google pour vérification du respect des règles. La Field Trial démarre automatiquement après approbation.

La vérification du respect des règles porte sur des éléments tels que le nom de votre appareil ou de votre produit, les images de l'appareil et les liens vidéo.

Administrer l'essai sur le terrain

Une fois que le Field Trial est approuvé et apparaît dans la section Démarré :

  1. Établissez un canal de communication formel avec les utilisateurs par e-mail ou par chat.

  2. Expédiez les appareils aux testeurs sur le terrain.

  3. Envoyez des ressources aux testeurs sur le terrain, comme votre page d'aide et un lien vers l'enquête.

  4. Soutenez vos testeurs sur le terrain :

    • Répondre aux questions et aider à résoudre les problèmes rencontrés sur le terrain.
    • Encouragez les utilisateurs à partager des journaux, à signaler des bugs et à envoyer des commentaires depuis l'GHA lorsque des problèmes surviennent.
  5. Surveillez les tableaux de bord et les journaux à l'aide de Google Cloud Monitoring dashboard (accessible depuis le lien Afficher sur la page Gérer les projets de Developer Console) :

    • Surveiller la réussite de la configuration, y compris le provisionnement, l'enregistrement et l'exécution des requêtes
    • Surveillez les métriques d'engagement telles que les utilisateurs actifs par jour (UAJ), les utilisateurs actifs par semaine (UAS) ou vos propres métriques personnalisées.
    • Surveillez les journaux pour détecter les erreurs.

Modifier les testeurs

La liste des testeurs peut être mise à jour pour un Field Trial en cours.

Cliquez sur Modifier les testeurs pour la version de l'intégration dans la section Lancé. Une boîte de dialogue s'affiche, dans laquelle vous pouvez modifier la liste des testeurs. Cliquez sur Enregistrer pour enregistrer les modifications.

Arrêter une phase de tests

Pour arrêter un Field Trial :

Accéder à la Developer Console

  1. Accédez à Matter > Field Trial (Essai sur le terrain).
  2. Dans la section Démarré, sélectionnez le Field Trial que vous souhaitez arrêter.
  3. Cliquez sur le bouton Arrêter.

Le Field Trial devrait maintenant s'afficher dans la section Terminé.

Redémarrer un test en conditions réelles

Pour redémarrer un Field Trial :

Accéder à la Developer Console

  1. Accédez à Matter > Field Trial (Essai sur le terrain).
  2. Dans la section Terminé, sélectionnez le Field Trial que vous souhaitez relancer.
  3. Cliquez sur le bouton Restart (Redémarrer).

Field Trial devrait maintenant s'afficher dans la section Démarré.

États de la console

Les états de la console suivants sont rencontrés lors de la phase Field Trial :

Section État Description Exigence Et ensuite ?
Prêt pour l'examen Field Trial Prêt Cette version de integration peut être envoyée pour examenField Trial. Les integrations retirés sont également marqués comme "Prêts". Le integrationdoit être versionné. Envoyez cette version de l' integration pour examen par Field Trial.
Envoyés pour examen En cours d'examen Cette version de l' integration est en cours d'examen. Le formulaire de transfert a bien été envoyé.

Attendez que la version soit approuvée pour que le Field Trial puisse commencer.

ou

Retirez-vous, si vous le souhaitez.

Envoyés pour examen Refusé Cette version de l' integration ne respecte pas les critères de vérification du respect des règles. Un Field Trial ne peut donc pas être lancé. Field Trial critères n'ont pas été remplis.

Corrigez les problèmes dans le integrationexistant ou créez une version du integration qui répond aux critèresField Trial, puis contactez votre responsable de compte et envoyez-le pour examenField Trial.

ou

Si vous n'êtes pas d'accord avec les problèmes identifiés, vous pouvez contester le résultat auprès de votre responsable de compte.

Démarré Démarré Cette version de l' integration a été approuvée et les testeurs peuvent commencer à la tester. Field Trial a été approuvé.

Envoyez des informations aux testeurs invités.

ou

Arrêtez l'essai sur le terrain.

Terminé Terminé Field Trial pour cette version a été arrêté, et les testeurs ne peuvent plus participer. Field Trial exécution. Redémarrer l'essai sur le terrain, si vous le souhaitez.