Notificações de ações de casa inteligente

As notificações permitem que a ação smart home use Google Assistant para se comunicar com os usuários sobre eventos ou mudanças importantes relacionados ao dispositivo. Você pode implementar notificações para alertar os usuários sobre eventos oportunos do dispositivo, por exemplo, quando alguém está na porta, ou para informar uma mudança de estado do dispositivo solicitada, como quando uma fechadura da porta foi ativada ou travada.

Sua ação smart home pode enviar os seguintes tipos de notificação aos usuários:

  • Notificações proativas: alertam o usuário sobre um evento smart home sem solicitações anteriores aos dispositivos, como a campainha tocando.

  • Respostas de acompanhamento: uma confirmação de que uma solicitação de comando do dispositivo foi bem-sucedida ou falhou, por exemplo, ao trancar uma porta. Use esses alertas para comandos do dispositivo que levam tempo para serem concluídos. Respostas de acompanhamento só são compatíveis quando solicitações de comando do dispositivo são enviadas de alto-falantes inteligentes e smart displays.

Assistant fornece essas notificações aos usuários como anúncios sobre alto-falantes inteligentes e smart displays. As notificações proativas estão desativadas por padrão. Os usuários podem ativar ou desativar todas as notificações proativas do Google Home app (GHA).

Eventos que acionam notificações

Quando ocorrem eventos do dispositivo, o cumprimento da ação envia uma solicitação de notificação ao Google. As características do dispositivo compatíveis com a ação smart home determinam quais tipos de eventos de notificação estão disponíveis e os dados que podem ser incluídos nessas notificações.

As seguintes características são compatíveis com as notificações proativas:

Características Eventos
ObjectDetection Objetos detectados pelo dispositivo, como um rosto reconhecido na porta. Por exemplo: "Alice e Beto estão na porta da frente."
RunCycle O dispositivo conclui um ciclo. Por exemplo: "O ciclo da máquina de lavar foi concluído."
SensorState O dispositivo detecta um estado de sensor compatível. Por exemplo: "O detector de fumaça detecta fumaça."
TemperatureControl O dispositivo atinge um valor definido de temperatura. Por exemplo: "O forno foi preaquecido em 350 graus."
ArmDisarm O sistema entra em um estado de pré-alarme com uma contagem regressiva de entrada, acionada por uma porta aberta.
CameraStream Link para a transmissão ao vivo da câmera depois que um objeto ou movimento é detectado pelo dispositivo.
MotionDetection "Movimentos foram detectados às 12h do dia 1o de julho de 2020."

As seguintes características são compatíveis com as respostas de acompanhamento:

Características Eventos
ArmDisarm Status de conclusão e mudança de estado após a execução do comando do dispositivo action.devices.commands.ArmDisarm. Por exemplo: "O sistema de segurança foi ligado."
LockUnlock Status de conclusão e mudança de estado após a execução do comando do dispositivo action.devices.commands.LockUnlock. Por exemplo: "A porta da frente foi trancada" ou "A porta da frente está emperrada."
NetworkControl Status de conclusão e mudança de estado após a execução do comando do dispositivo action.devices.commands.TestNetworkSpeed. Por exemplo: "Seu teste de velocidade de rede foi concluído. A velocidade de download no roteador do escritório é de 80,2 Kbps no momento, e a de upload é de 9,3 Kbps."
OpenClose Status de conclusão e mudança de estado após a execução do comando do dispositivo action.devices.commands.OpenClose. Por exemplo: "A porta da frente se abriu" ou "Não foi possível abrir a porta da frente".
StartStop Status de conclusão e mudança de estado após a execução do comando do dispositivo action.devices.commands.StartStop. Por exemplo: "The vacuum was started."

Todos os tipos de dispositivos são compatíveis com as notificações das características aplicáveis.

Criar notificações para a ação de casa inteligente

Adicione notificações à sua ação smart home nestas etapas:

  1. Indicar ao Google se as notificações estão ativadas no app do dispositivo smart home. Se os usuários ativarem ou desativarem as notificações no app, envie uma solicitação SYNC para informar ao Google sobre a mudança do dispositivo.
  2. Quando ocorrer um evento relevante do dispositivo ou uma mudança de estado que aciona uma notificação, envie uma solicitação chamando a API reportStateAndNotification Report State. Se o estado do dispositivo mudar, você poderá enviar um payload de estado e de notificação juntos na chamada de Report State e de notificação.

As seções abaixo apresentam essas etapas em mais detalhes.

Indicar se as notificações estão ativadas no app

Os usuários podem escolher se querem receber notificações proativas ativando esse recurso no GHA. No app do dispositivo smart home, também é possível adicionar a capacidade dos usuários de ativar ou desativar explicitamente as notificações do dispositivo, por exemplo, nas configurações do app.

Indique ao Google que as notificações estão ativadas para o dispositivo fazendo uma chamada Request SYNC para atualizar os dados do dispositivo. Envie uma solicitação SYNC como essa sempre que os usuários mudarem essa configuração no seu app.

Na sua resposta a SYNC, envie uma destas atualizações:

  • Se o usuário tiver ativado as notificações explicitamente no app do dispositivo ou se você não fornecer uma opção, defina a propriedade devices.notificationSupportedByAgent como true.
  • Se o usuário desativou as notificações explicitamente no app do dispositivo, defina a propriedade devices.notificationSupportedByAgent como false.

O snippet a seguir mostra um exemplo de como configurar a resposta SYNC:

devices: [{
   id: 'device123',
   ...
   notificationSupportedByAgent: true,
}]

Enviar solicitações de notificação ao Google

Para acionar notificações no Assistant, o fulfillment envia um payload de notificação para o Google Home Graph por meio de uma chamada Report State e da API Notification.

Ativar a API Google HomeGraph

  1. No Google Cloud Console, acesse a página API HomeGraph.

    Acessar a página da API HomeGraph
  2. Selecione o projeto que corresponde ao ID do seu projeto do smart home.
  3. Clique em ATIVAR.

Criar uma chave de conta de serviço

Siga estas instruções para gerar uma chave da conta de serviço do Google Cloud Console:

Observação: verifique se você está usando o projeto correto do GCP ao executar estas etapas. Esse é o projeto que corresponde ao ID do seu projeto do smart home.

  1. No Google Cloud Console, acesse a página Criar chave da conta de serviço.

    Acessar página "Criar chave da conta de serviço"
  2. Na lista Conta de serviço, selecione Nova conta de serviço.
  3. No campo Nome da conta de serviço, insira um nome.
  4. No campo ID da conta de serviço, insira um ID.

  5. Na lista Papel, selecione Contas de serviço > Criador de token da conta de serviço.

  6. Em Tipo de chave, selecione a opção JSON.

  7. Clique em Criar. O download de um arquivo JSON que contém a chave é feito no computador.

Enviar a notificação

Faça a chamada de solicitação de notificação usando a API devices.reportStateAndNotification. A solicitação JSON precisa incluir um eventId, que é um ID exclusivo gerado pela sua plataforma para o evento que aciona a notificação. O eventId precisa ser um ID aleatório que seja diferente sempre que você enviar uma solicitação de notificação.

No objeto notifications transmitido na chamada de API, inclua um valor priority que defina como a notificação será apresentada. O objeto notifications pode incluir campos diferentes, dependendo da característica do dispositivo.

Siga um destes caminhos para definir o payload e chamar a API:

Enviar um payload de notificação proativo

Para chamar a API, selecione uma opção nestas guias:

HTTP

A API Home Graph fornece um endpoint HTTP.

  1. Use o arquivo JSON da conta de serviço salvo para criar um JSON Web Token (JWT). Para mais informações, consulte Como autenticar usando uma conta de serviço.
  2. Consiga um token de acesso do OAuth 2.0 com o escopo https://www.googleapis.com/auth/homegraph usando oauth2l:
    3. oauth2l fetch --credentials service-account.json \
  --scope https://www.googleapis.com/auth/homegraph
  3. Crie a solicitação JSON com o agentUserId. Este é um exemplo de solicitação JSON para Report State e notificação:
    4. {
  "agentUserId": "PLACEHOLDER-USER-ID",
  "eventId": "PLACEHOLDER-EVENT-ID",
  "requestId": "PLACEHOLDER-REQUEST-ID",
  "payload": {
    "devices": {
      "notifications": {
        "PLACEHOLDER-DEVICE-ID": {
          "ObjectDetection": {
            "priority": 0,
            "detectionTimestamp": 1534875126750,
            "objects": {
              "named": [
                "Alice"
              ],
              "unclassified": 2
            }
          }
        }
      }
    }
  }
}
  4. Combine o Report State e o JSON de notificação e o token na solicitação POST HTTP para o endpoint do Google Home Graph. Veja um exemplo de como fazer a solicitação na linha de comando usando curl como teste:
    5. curl -X POST -H "Authorization: Bearer ACCESS_TOKEN" \
  -H "Content-Type: application/json" \
  -d @request-body.json \
  "https://homegraph.googleapis.com/v1/devices:reportStateAndNotification"

gRPC

A API Home Graph fornece um endpoint gRPC (em inglês).

  1. Confira a definição do serviço de buffers de protocolo para a API Home Graph.
  2. Siga a documentação do desenvolvedor do gRPC para gerar stubs de cliente para uma das linguagens compatíveis.
  3. Chame o método ReportStateAndNotification.

Node.js

O cliente Node.js das APIs do Google fornece vinculações para a API Home Graph.

  1. Inicialize o serviço google.homegraph com o Application Default Credentials.
  2. Chame o método reportStateAndNotification com o ReportStateAndNotificationRequest. Ele retorna um Promise com o ReportStateAndNotificationResponse.
const homegraphClient = homegraph({
  version: 'v1',
  auth: new GoogleAuth({
    scopes: 'https://www.googleapis.com/auth/homegraph'
  })
});

const res = await homegraphClient.devices.reportStateAndNotification({
  requestBody: {
    agentUserId: 'PLACEHOLDER-USER-ID',
    eventId: 'PLACEHOLDER-EVENT-ID',
    requestId: 'PLACEHOLDER-REQUEST-ID',
    payload: {
      devices: {
        notifications: {
          'PLACEHOLDER-DEVICE-ID': {
            ObjectDetection: {
              priority: 0,
              detectionTimestamp: 1534875126750,
              objects: {
                named: ['Alice'],
                unclassified: 2
              }
            }
          }
        }
      }
    }
  }
});

Java

A biblioteca de cliente da API HomeGraph para Java fornece vinculações à API Home Graph.

  1. Inicialize o HomeGraphApiService usando o Application Default Credentials.
  2. Chame o método reportStateAndNotification com o ReportStateAndNotificationRequest. Ele retorna um ReportStateAndNotificationResponse.
// Get Application Default credentials.
GoogleCredentials credentials =
    GoogleCredentials.getApplicationDefault()
        .createScoped(List.of("https://www.googleapis.com/auth/homegraph"));

// Create Home Graph service client.
HomeGraphService homegraphService =
    new HomeGraphService.Builder(
            GoogleNetHttpTransport.newTrustedTransport(),
            GsonFactory.getDefaultInstance(),
            new HttpCredentialsAdapter(credentials))
        .setApplicationName("HomeGraphExample/1.0")
        .build();

// Build device notification payload.
Map<?, ?> notifications =
    Map.of(
        "ObjectDetection",
        Map.of(
            "priority", 0,
            "detectionTimestamp", 1534875126,
            "objects", Map.of("named", List.of("Alice"), "unclassifed", 2)));

// Send notification.
ReportStateAndNotificationRequest request =
    new ReportStateAndNotificationRequest()
        .setRequestId("PLACEHOLDER-REQUEST-ID")
        .setAgentUserId("PLACEHOLDER-USER-ID")
        .setEventId("PLACEHOLDER-EVENT-ID")
        .setPayload(
            new StateAndNotificationPayload()
                .setDevices(
                    new ReportStateAndNotificationDevice()
                        .setNotifications(Map.of("PLACEHOLDER-DEVICE-ID", notifications))));
homegraphService.devices().reportStateAndNotification(request);
Enviar um payload de resposta de acompanhamento

O payload de uma resposta de acompanhamento contém o status da solicitação, os códigos de erro para falhas de evento, se aplicável, e o followUpToken válido, fornecido durante a solicitação da intent EXECUTE. O followUpToken precisa ser usado em até cinco minutos para permanecer válido e associar corretamente a resposta à solicitação original.

O snippet a seguir mostra um exemplo de payload de solicitação EXECUTE com um campo followUpToken.

{
  "requestId": "ff36a3cc-ec34-11e6-b1a0-64510650abcf",
  "inputs": [{
    "intent": "action.devices.EXECUTE",
    "payload": {
      "commands": [{
        "devices": [{
          "id": "123",
        }],
        "execution": [{
          "command": "action.devices.commands.TestNetworkSpeed",
          "params": {
            "testDownloadSpeed": true,
            "testUploadSpeed": false,
            "followUpToken": "PLACEHOLDER"
          }
        }]
      }]
    }
  }]
};

O Google usa o followUpToken para enviar a notificação apenas no dispositivo com que o usuário estava interagindo originalmente, e não para transmitir em todos os dispositivos do usuário.

Para chamar a API, selecione uma opção nestas guias:

HTTP

A API Home Graph fornece um endpoint HTTP.

  1. Use o arquivo JSON da conta de serviço salvo para criar um JSON Web Token (JWT). Para mais informações, consulte Como autenticar usando uma conta de serviço.
  2. Consiga um token de acesso do OAuth 2.0 com o escopo https://www.googleapis.com/auth/homegraph usando oauth2l:
    3. oauth2l fetch --credentials service-account.json \
  --scope https://www.googleapis.com/auth/homegraph
  3. Crie a solicitação JSON com o agentUserId. Este é um exemplo de solicitação JSON para Report State e notificação:
    4. {
  "agentUserId": "PLACEHOLDER-USER-ID",
  "eventId": "PLACEHOLDER-EVENT-ID",
  "requestId": "PLACEHOLDER-REQUEST-ID",
  "payload": {
    "devices": {
      "notifications": {
        "PLACEHOLDER-DEVICE-ID": {
          "NetworkControl": {
            "priority": 0,
            "followUpResponse": {
              "status": "SUCCESS",
              "followUpToken": "PLACEHOLDER",
              "networkDownloadSpeedMbps": 23.3,
              "networkUploadSpeedMbps": 10.2
            }
          }
        }
      }
    }
  }
}
  4. Combine o Report State e o JSON de notificação e o token na solicitação POST HTTP para o endpoint do Google Home Graph. Veja um exemplo de como fazer a solicitação na linha de comando usando curl como teste:
    5. curl -X POST -H "Authorization: Bearer ACCESS_TOKEN" \
  -H "Content-Type: application/json" \
  -d @request-body.json \
  "https://homegraph.googleapis.com/v1/devices:reportStateAndNotification"

gRPC

A API Home Graph fornece um endpoint gRPC.

  1. Confira a definição do serviço de buffers de protocolo para a API Home Graph.
  2. Siga a documentação do desenvolvedor do gRPC para gerar stubs de cliente para uma das linguagens compatíveis.
  3. Chame o método ReportStateAndNotification.

Node.js

O cliente Node.js das APIs do Google fornece vinculações para a API Home Graph.

  1. Inicialize o serviço google.homegraph com o Application Default Credentials.
  2. Chame o método reportStateAndNotification com o ReportStateAndNotificationRequest. Ele retorna um Promise com o ReportStateAndNotificationResponse.
const followUpToken = executionRequest.inputs[0].payload.commands[0].execution[0].params.followUpToken;

const homegraphClient = homegraph({
  version: 'v1',
  auth: new GoogleAuth({
    scopes: 'https://www.googleapis.com/auth/homegraph'
  })
});

const res = await homegraphClient.devices.reportStateAndNotification({
  requestBody: {
    agentUserId: 'PLACEHOLDER-USER-ID',
    eventId: 'PLACEHOLDER-EVENT-ID',
    requestId: 'PLACEHOLDER-REQUEST-ID',
    payload: {
      devices: {
        notifications: {
          'PLACEHOLDER-DEVICE-ID': {
            NetworkControl: {
              priority: 0,
              followUpResponse: {
                status: 'SUCCESS',
                followUpToken,
                networkDownloadSpeedMbps: 23.3,
                networkUploadSpeedMbps: 10.2,
              }
            }
          }
        }
      }
    }
  }
});

Java

A biblioteca de cliente da API HomeGraph para Java fornece vinculações à API Home Graph.

  1. Inicialize o HomeGraphApiService usando o Application Default Credentials
  2. Chame o método reportStateAndNotification com o ReportStateAndNotificationRequest. Ele retorna um ReportStateAndNotificationResponse.
// Get Application Default credentials.
GoogleCredentials credentials =
    GoogleCredentials.getApplicationDefault()
        .createScoped(List.of("https://www.googleapis.com/auth/homegraph"));

// Create Home Graph service client.
HomeGraphService homegraphService =
    new HomeGraphService.Builder(
            GoogleNetHttpTransport.newTrustedTransport(),
            GsonFactory.getDefaultInstance(),
            new HttpCredentialsAdapter(credentials))
        .setApplicationName("HomeGraphExample/1.0")
        .build();

// Extract follow-up token.
ExecuteRequest.Inputs executeInputs = (Inputs) executeRequest.getInputs()[0];
String followUpToken =
    (String)
        executeInputs
            .getPayload()
            .getCommands()[0]
            .getExecution()[0]
            .getParams()
            .get("followUpToken");

// Build device follow-up response payload.
Map<?, ?> followUpResponse =
    Map.of(
        "NetworkControl",
        Map.of(
            "priority",
            0,
            "followUpResponse",
            Map.of(
                "status",
                "SUCCESS",
                "followUpToken",
                followUpToken,
                "networkDownloadSpeedMbps",
                23.3,
                "networkUploadSpeedMbps",
                10.2)));

// Send follow-up response.
ReportStateAndNotificationRequest request =
    new ReportStateAndNotificationRequest()
        .setRequestId("PLACEHOLDER-REQUEST-ID")
        .setAgentUserId("PLACEHOLDER-USER-ID")
        .setEventId("PLACEHOLDER-EVENT-ID")
        .setPayload(
            new StateAndNotificationPayload()
                .setDevices(
                    new ReportStateAndNotificationDevice()
                        .setNotifications(Map.of("PLACEHOLDER-DEVICE-ID", followUpResponse))));
homegraphService.devices().reportStateAndNotification(request);

Geração de registros

As notificações são compatíveis com a geração de registros de eventos, conforme descrito em Acessar logs de eventos com o Cloud Logging. Esses registros são úteis para testar e manter a qualidade das notificações na ação.

Veja a seguir o esquema de uma entrada notificationLog:

Propriedade Descrição
requestId ID da solicitação de notificação.
structName Nome da estrutura de notificação, como "ObjectDetection".
status Indica o status da notificação.

O campo status inclui vários status que podem indicar erros no payload da notificação. Alguns deles podem estar disponíveis apenas em ações que não foram lançadas para produção.

Confira alguns exemplos de status:

Status Descrição
EVENT_ID_MISSING Indica que o campo obrigatório eventId está ausente.
PRIORITY_MISSING Indica que um campo priority está ausente.
NOTIFICATION_SUPPORTED_BY_AGENT_FALSE Indica que a propriedade notificationSupportedByAgent do dispositivo de notificação fornecida em SYNC é falsa.
NOTIFICATION_ENABLED_BY_USER_FALSE Indica que o usuário não ativou as notificações no dispositivo de notificação no GHA. Esse status só está disponível em ações que não foram lançadas para produção.
NOTIFYING_DEVICE_NOT_IN_STRUCTURE Indica que o usuário não atribuiu o dispositivo notificante a uma casa/estrutura. Esse status só está disponível em ações que não foram lançadas para produção.

Além desses status gerais que podem ser aplicados a todas as notificações, o campo status também pode incluir status específicos de características, quando aplicável (por exemplo, OBJECT_DETECTION_DETECTION_TIMESTAMP_MISSING).

Anterior
Implementar estado do relatório
Próxima
Testar e compartilhar ações