Parole au texte

La reconnaissance automatique de la parole (ASR) permet aux applications de prendre en charge la saisie vocale pour des cas d'utilisation tels que le SVI, l'identification et différents types de robots/assistants vocaux. Grâce à cette fonction, l'application obtient la transcription du discours de l'utilisateur (sous forme de texte) lorsqu'elle s'attend à ce que l'utilisateur réponde à une question en la formulant plutôt qu'en entrant des chiffres (DTMF) ; elle peut ensuite poursuivre le flux d'appels conformément à sa logique commerciale en fonction de ce que l'utilisateur a dit.

Comment cela fonctionne-t-il ?

Généralement, la RPA est utilisée en conjonction avec un message audio diffusé à l'utilisateur. Le message peut être un fichier audio ou Synthèse vocaleou une combinaison des deux jouées séquentiellement. Pour activer le RSA, le NCCO doit contenir un input avec les paramètres de discours spécifiés.

Exemple de NCCO

[
  {
    "action": "talk",
    "text": "Hello!"
  },
  {
    "action": "talk",
    "text": "Please tell us, how can we help you today?",
    "bargeIn": true
  },
  {
    "eventUrl": [
      "https://api.example.com/callbacks/events"
    ],
    "eventMethod": "POST",
    "action": "input",
    "type": [ "speech" ],
    "speech": {
      "language": "en-gb",
      "context": [
        "support",
        "buy",
        "credit",
        "account"
      ],
      "endOnSilence": 0.5,
      "saveAudio": true,
      "sensitivity": "90"
    }
  }
]

Les Guide de référence du NCCO contient des informations sur tous les paramètres possibles qui peuvent être utilisés en conjonction avec l'ASR input Action du NCCO.

Type d'entrée

Set (jeu de mots) type comme speech pour la saisie vocale uniquement, ou [ "dtmf", "speech" ] d'accepter les deux discours ou DTMF.

Langue

La langue dans laquelle l'utilisateur doit s'exprimer doit être précisée dans le champ "Langue". language paramètre (en-US par défaut).

Langues prises en charge

Contexte

Des indications peuvent être fournies à l'aide de la fonction context afin d'améliorer la qualité de la reconnaissance. Les valeurs définies peuvent être les mots ou les phrases attendus de l'utilisateur, par exemple, ['one', 'two', 'three'] ou ['support', 'order starship'].

Barge In

Si l'utilisateur n'appelle pas pour la première fois, il se peut qu'il connaisse déjà la question à poser, de sorte qu'il peut commencer à parler avant même que le message audio ne soit terminé. Pour cela, il faut que l'utilisateur commence à parler avant même que le message audio ne se termine, bargeIn du TTS (ou stream - quelle que soit l'action utilisée pour le message) doit être activée.

Sauvegarder l'audio

Le son de la parole peut être stocké en option. Pour obtenir l'enregistrement, la touche saveAudio doit être défini, alors le paramètre recording_url sera inclus dans la charge utile de la demande de rappel. Cela peut être utile pour comparer la transcription avec l'audio original. Utiliser la fonction Télécharger un enregistrement pour télécharger l'audio.

Exemple de charge utile d'événement

Une fois que le BCN input est terminée, le rappel de l'entrée est envoyé :

{
  "speech": {
    "recording_url": "https://api-us.nexmo.com/v1/files/ee94a327-ab6b-4bef-86bf-cadca33343e9",
    "timeout_reason": "end_on_silence_timeout",
    "results": [
      {
        "confidence": "0.9405097",
        "text": "Support"
      },
      {
        "confidence": "0.70543784",
        "text": "Supper"
      },
      {
        "confidence": "0.5949854",
        "text": "Puppy"
      }
    ]
  },
  "dtmf": {
    "digits": null,
    "timed_out": false
  },
  "uuid": "529aa8f0-0ad8-42b0-ad61-b76dca18bb52",
  "conversation_uuid": "CON-7347b08d-5f51-478f-bfb2-e8c3fd39509f",
  "timestamp": "2020-02-07T11:42:40.933Z"
}

Dans le corps de la réponse, un nouveau NCCO est attendu, contenant les actions du flux d'appel suivant basées sur la logique de l'application et l'entrée de l'utilisateur (speech.results.text). Voir aussi Référence pour les webhooks pour plus de détails.