WhatsApp Voice-berichten

Hoe Voice-berichten werken

Wanneer een WhatsApp-gebruiker een spraakbericht verzendt, verwerkt Agentforce dit in deze stappen.

• Downloadt het audiobestand en vertaalt het naar tekst via de Einstein Trust Layer.
• Verwerkt de getranscribeerde tekst met behulp van de redeneerengine van de agent.
• Genereert een respons.
• Verzendt de respons als:
  • Een spraakbericht wanneer spraakantwoorden zijn ingeschakeld.
  • Een sms-bericht, of een andere beschikbare responsindeling, wanneer spraakantwoorden niet zijn ingeschakeld.

Hoe spraak- en tekstantwoorden werken

Wanneer spraakantwoorden zijn ingeschakeld, antwoordt Agentforce automatisch in dezelfde indeling als elk inkomend bericht: een spraakbericht in wordt verzonden, een sms-bericht in wordt verzonden.

WhatsApp-gebruikers kunnen tijdens het gesprek schakelen tussen spraak en tekst, terwijl Agentforce voor elke beurt het antwoordtype koppelt. Er is geen instelling om de agent altijd met spraak te laten reageren.

Als spraakantwoorden zijn uitgeschakeld, kan de agent nog steeds inkomende spraakberichten transcriberen en verwerken, maar reageert deze met tekst.

Bestandsindelingen en limieten

Spraakberichten ondersteunen de volgende bestandsindelingen en limieten.

Spraakberichten gebruiken de OGG-audio-indeling met het MIME-type audio/ogg. Ondersteunde bestandsextensies zijn .ogg, .oga en .ogx.

Als een spraakbericht de ondersteunde bestandsgrootte of duurlimieten overschrijdt, verwerkt Agentforce het niet.

Spraakberichten ondersteunen de volgende tekstlimieten.

Als een reactie van een agent de ondersteunde tekstlengte overschrijdt, verzendt Agentforce de reactie als tekst in plaats van spraak.

Overwegingen en beperkingen

Reactietijd

Spraakberichten duren langer dan tekstberichten, omdat Agentforce de inkomende audio transcribeert en spraak genereert voor de reactie. De typische reactietijd is 12-17 seconden. Langere reacties van agenten kunnen meer dan 20 seconden duren. Houd reacties van agenten beknopt om de reactietijd te verkorten.

Audiokwaliteit

Spraaktranscriptie en spraaksynthese zijn afhankelijk van de geluidskwaliteit. Achtergrondgeluid, lange perioden van stilte of onduidelijke spraak kunnen de nauwkeurigheid van transcriptie verminderen. Als Agentforce een spraakbericht niet nauwkeurig kan transcriberen, vraagt het de WhatsApp-gebruiker om het bericht te herhalen of als tekst te verzenden.

Kanaalondersteuning

Voiceberichten werken alleen op WhatsApp. Andere berichtenverkeerskanalen ondersteunen geen spraakberichten.

Taaldetectie

Houd elk gesprek in één taal die overeenkomt met de taal die de WhatsApp-gebruiker gebruikt en de taal die voor de agent is geconfigureerd. Wisselen van taal tijdens een sessie kan van invloed zijn op taaldetectie voor daaropvolgende antwoorden.

Taalconfiguratie van subagent

Als uw agent subagenten gebruikt, configureert u elke subagent om dezelfde taal als de agent te gebruiken. Als een subagent in een andere taal reageert, gebruikt de agent de geconfigureerde taal voor het spraakantwoord, wat kan leiden tot een onjuiste uitspraak of een onbedoeld accent.

Als een Engelstalige agent bijvoorbeeld een subagent gebruikt die is geconfigureerd voor Spaans, kan de agent de Spaanse reactie van de subagent uitspreken met behulp van de Engelse uitspraak.

Agentvereisten

Uw agent moet zijn gemaakt in Agentforce Builder en de redeneerengine Atlas gebruiken. Agenten die zijn gemaakt in de verouderde samensteller, worden niet ondersteund.

Escalatieberichten

Wanneer een gesprek met succes wordt overgedragen aan een menselijke agent, komt het overdrachtsbericht overeen met de invoerindeling van de WhatsApp-gebruiker. Als de WhatsApp-gebruiker een spraakbericht heeft verzonden, wordt het overdrachtsbericht als spraak verzonden. Als de WhatsApp-gebruiker een sms-bericht heeft verzonden, wordt het overdrachtsbericht als tekst verzonden. Als de overdracht mislukt, wordt het bericht altijd als tekst verzonden.

Spraakweergave op WhatsApp

Spraakantwoorden worden weergegeven als audiobijlagen in plaats van spraakberichten vanwege vereisten voor WhatsApp-indeling.

Antwoorden om beurten

Agentforce reageert alleen met een spraakbericht wanneer de WhatsApp-gebruiker een spraakbericht verzendt. Sms-berichten ontvangen sms-reacties. U kunt de agent niet configureren om altijd met spraak te reageren.

Op transcriptie gebaseerde redenering

Agentforce redeneert over de getranscribeerde tekst, niet over de oorspronkelijke audio. Het interpreteert geen toon, emotie, achtergrondgeluiden of andere niet-spraakaanwijzingen.

Limieten voor spraakberichten

WhatsApp-gebruikers kunnen één spraakbericht per gespreksbeurt verzenden. Meerdere spraakberichten in hetzelfde bericht worden niet ondersteund.

Multimodale invoer

Spraakberichten ondersteunen alleen audio. Afbeeldingen, bestanden en andere multimodale invoer worden niet ondersteund in hetzelfde bericht.

Gegevensverwerking

Transcriptie van spraakberichten en spraaksynthese gebruiken Agentforce Speech Foundations. Zie Infrastructuur en subprocessors voor informatie over de manier waarop uw gegevens worden verwerkt.