Crie um chatbot com IA no N8N que transcreve e responde áudios no WhatsApp | Autotic

fala automator tudo beleza Hugo aqui do aoti seja bem-vindo a mais um tutorial do nosso canal e hoje eu vou falar de algo bem interessante tá para você que trabalha aí né com Automação de atendimento né você que constrói chatbot né tanto aí pra sua empresa pro seu negócio quanto também para os seus clientes finais tá hoje nós vamos falar como você pode introduzir né a inteligência artificial no seu chatbot para que ele consig responder os áudios do WhatsApp tá eh geralmente né quando as pessoas entram em contato ali eh para poder perguntar alguma coisa

tirar alguma dúvida sobre um produto ou um serviço seu né ou da sua empresa Geralmente as pessoas mandam textos tá porém tem aqueles clientes que adoram conversar né então às vezes mesmo para poder fazer uma pergunta ali eles preferem por exemplo mandar áudio né Eu sou um exemplo disso né eu gosto muito de mandar áudio no WhatsApp quando eu tô conversando ali com uma empresa né ou com um parceiro Enfim então é importante que você consiga aproveitar né da inteligência artificial para você poder contornar isso né imagine o cliente entrando em contato ali fazendo uma

pergunta pelo áudio o seus o seu chatbot né não sabe lidar com isso tá então eu vou te mostrar como você pode eh contornar né digamos assim esse não é que esse problema né mas esse cenário né Para que o seu bote aí possa conseguir atender qualquer queer perfil de cliente respondendo ali da forma mais assertiva seja ele enviando um texto ou ele enviando um áudio Tá bom se você gosta desse tipo de conteúdo né você que já Segue aí o nosso canal ou você que tá conhecendo agora o nosso canal mas tem interesse por

isso deixa aí um joinha nesse vídeo tá que eu tenho certeza que vai valer muito a pena Ok no final você vai ficar e Maravilhado com o que você vai ver aqui tá E não se esqueça de se inscrever no canal porque isso é muito importante para que o YouTube possa entender a relevância aqui do nosso canal e está indicando mais e mais ainda os nossos vídeos Tá bom então bora parar de falar um pouquinho vamos partir então aqui pra prática tá eu tô aqui com a automação aqui no ntn tá lembrando que essa automação

aqui ela pertence ao nosso mais novo curso que é sobre chatbot inteligente no ntn usando aqui o leng chain e a ZAP tá o leng chain na verdade é o fre Framework né ali para poder você usar diversas inteligências artificiais né ou seja diversos llms modelos de inteligência tá e a ZAP é para que a gente possa conseguir eh fazer essa automação ali diretamente do WhatsApp tá bom esse curso aqui ele é exclusivo e ele vai estar disponível somente na auto Academy né que será o nosso próprio ambiente de ensino estará sendo lançado agora no

mês de junho beleza Então vamos lá vamos fazer um overview aqui da automação bom é o seguinte eh Começando aqui né do Web Hook eh como você já deve ter acompanhado o Web Hook é uma forma de monitorar as mensagens ali do WhatsApp tá então tudo que o cliente enviar pra gente seja texto ou áudio né ou até mesmo uma mídia esse web Hook aqui ele vai estar recebendo se você não sabe como como isso aqui funciona tá pode acessar os nossos cursos de chatbot gratuito aí no canal ou então pela udem tá bom bom

em seguida a gente tem aqui Um node de parâmetros tá isso aqui é para que a gente possa eh armazenar ali parâmetros da api né Eh parâmetros também eh às vezes de um serviço que você vai estar utilizando ali por exemplo eh Talvez uma apq do chat GPT ou uma APQ por exemplo do Eleven Labs né se você por exemplo for trabalhar aí com clonagem de voz Enfim então esse node que é um set é específico para isso tá em seguida nós temos aqui um if onde eu faço uma filtragem Para quê Para que o

meu Bote ele possa tratar somente mensagens do tipo texto e que seja de contato tá que não seja de grupo para não ter aquele risco do bote começar a mandar mensagens aleatórias para um grupo isso é muito chato né Às vezes tem pessoas que vai montar um chatbot ali não faz essa filtragem deixa o chatbot ligado o chatbot começa a mandar mensagem aleatória nos grupos à vez a pessoa é até banida né sem saber por conta disso tá então é importante fazer essa filtragem aqui tá bom para que o bot só avance se for uma

mensagem do tipo eh texto tá eh e de um contato ok sendo que nesse caso a gente vai ter que ter um fluxo alternativo aqui Para quê Para que quando não for um texto a gente possa verificar se é um áudio tá é claro que o usuário aqui ele pode por exemplo eh mandar um um arquivo né porém se ele mandar um arquivo vai chegar aqui no felse e não vai prosseguir tá mas se ele vê que por exemplo não é texto não é não é arquivo né mas por exemplo é um áudio ele vai

prosseguir aqui por cima tá então essa automação aqui ela consegue lidar com mensagem do tipo texto ou mensagens do tipo áudio tá lembrando que se for texto ele já vai prosseguir aqui pro nosso Agente né que tem a inteligência artificial ali é embutida e já vai gerar ali uma resposta com base nesse texto Tá Hugo não é texto o cliente foi lá e mandou um áudio ele vai prosseguir aqui por baixo tá E aí o que que a gente vai fazer eh quando um cliente manda um áudio tá na maioria das apis e não oficiais

tá eu acredito que a oficial Eu acho que ven o próprio arquivo o próprio binário Não sei não sei te confirmar isso Tá Mas nas não oficiais como por exemplo azap ele vai vir no formato base 64 então a gente usa esse node aqui chamado convert to file para transformar esse base 64 em um arquivo binário ou seja o próprio arquivo é do tipo MP3 tá que é o formato aceito pelo chat GPT tá é importante eu também fresar isso aqui porque tem muitas pessoas queer vezes tá usando ali uma API não oficial e o

áudio ele vem num formato ali eh como por exemplo eh ogg né ou às vezes também vem outros tipos de formatos também tá E e às vezes a pessoa acaba não conseguindo né proseguir ali na automação por conta disso tá se isso acontecer com você Você Precisa converter eh isso para MP3 tá lembrando que aqui no canal da Auto nós temos um tutorial né voltado só para é quem quer fazer conversão de arquivo de forma Nativa tá Ou seja você não vai precisar usar uma API externa uma API paga tá o próprio NN e consegue

fazer essa conversão de arquivos seja vídeo áudio entre outros tipos de mídia tá você consegue fazer isso de forma Nativa caso você queira saber como fazer você pode estar sendo um dos nossos assinantes aqui no canal tá para poder ter acesso a esse tutor tutorial aqui beleza bom Seguindo aqui então aqui ele vai então gerar o MP3 tá E vai converter aliás e vai transcrever através do chat GPT tá o chat GPT e você consegue fazer várias coisas ali não é só gerar uma resposta com a inteligência artificial né gerar um texto ali de resposta

você consegue também escrever um áudio quer pegar um áudio e transformar ele e em texto tá você consegue contrário também pegar um texto e gerar um áudio através dele e aí você pode definir ali e vozes né já pré-definidas né às vezes voz de um homem uma voz de uma mulher enfim o chat PT também permite isso tá para o pessoal aí que já tem né o chat GPT 4.0 né o o plano Plus lá do Open Eye aí já consegue fazer até mais coisas já consegue por exemplo gerar uma imagem através de um prompt

consegue eh aí uma descrição uma definição de uma imagem tá você você já consegue fazer bastante coisas aí avançad tá como a gente tá usando aqui o o plano free né digamos assim do do Open Eye né a gente só tem eh créditos lá mas o plano é free a gente consegue aqui pelo menos transcrever o áudio tá então eh o que o o cliente for mandar ali no WhatsApp de áudio eu vou conseguir transformar esse áudio em texto tá E por que eu preciso fazer isso porque eu preciso desse prompt para jogar aqui pro

meu agente de Inteligência Artificial tá porque geralmente né ele vai interpretar texto ele não vai interpretar áudio então eu tenho que fazer essa transcrição aqui no meu ntn tá então ele vai receber esse esse texto né que veio em formato de áudio do WhatsApp e aí ele vai usar aqui os sub noodes tá para poder trazer ali uma resposta mais assertiva possível Tá Começando aqui pelo modelo ele vai usar o chat GPT é claro que aqui você poderia usar diversas diversos outros modelos de inteligência né Nós temos do Google que é o o Gemini né

se eu não me engano eh tem o Mistral tem o olama Né que é open surce tem um também da da Amazon que eu não estou lembrando agora qual é o nome o próprio Open Eye que é o chat ept e entre outros tá aqui eu estou usando do chat ept né que é o mais conhecido tá eh temos também aqui a memória tá eh se você fez o nosso curso de introdução a inteligência artificial do nen Você viu que isso aqui é uma forma do teu Agente né do teu bot ele ter uma memória

ou seja ele guarda ali o histórico da conversa Para quê Para que caso a pessoa continue fazendo perguntas sobre aquilo ele sabe que se trata daquele tipo de assunto e não precisa eh digamos assim eh perguntar né tipo ah do que você tá falando né é por exemplo é como a gente estivesse aqui batendo uma conversa né se você chegar e falar assim e Ah gostaria de saber quais são os modelos de camisas que você tem né E aí eu vou falar ó nós temos modelo social nós temos um modelo tshirt né etc etc e

aí a pessoa por exemplo chega e fala assim ah e quais cores tem por exemplo o meu Bote ele já vai entender que ele está se referindo à camisa né ele não está se referindo por exemplo a um carro ou então sei lá a qualquer outro objeto por quê Porque ele tem essa memória né ou seja com base na memória o teu o bot ele sabe ali o contexto ele sabe ali que tem que continuar respondendo com base naquilo que foi perguntado anteriormente tá então para isso que serve a memória aqui do Agente Tá e

por último é a base de conhecimento né Tecnicamente conhecido como retriever né você que já tem uma familiaridade aí com modelos de de inteligência eh você pode conectar uma base de conhecimento aqui no seu no seu bot tá eu estou usando aqui uma base de conhecimento eh que está dentro do prprio NN Ou seja eu tenho um workflow tá eh que tem ali um node set onde eu armazeno ali várias informações por exemplo da aoti né seja de cursos serviços e etc tá isso aqui pessoal tudo é abordado aqui no nosso curso tá você vai

poder obter todos esses detalhes aqui infelizmente eu não consigo abordar tudo isso aqui porque daria horas e horas aqui de de vídeo né então é mais um overview OK mas tudo isso você aprende você aprenderá melhor dizendo no nosso curso né chb inteligente assim que Auto Academy for lançado Tá bom então o bot ele vai poder consultar também essa base para poder responder né porque por exemplo aqui se o cliente por exemplo Faz uma pergunta de um prodo da Auto que foi lançado recentemente e às vezes a internet não tem ainda acesso a essa informação

desse produto mas se o bot tá usando uma base de conhecimento ele vai ter acesso por exemplo se você perguntar sei lá o que é o Zap talvez na base de de conhecimentos da das inteligências artificiais não vai achar sobre a ZAP principalmente se você tiver usando o chat GPT 3.5 ou inferior tá o qu ele já consegue procurar mas o 3.5 já não consegue pegar informações eh atuais né acho que é até o ano de 2019 ou 2020 tá mas aqui ele já vai conseguir ter essa informação né dos produtos e serviços da sua

empresa do seu negócio tá bom E aí que que vai acontecer com isso aqui o bot vai conseguir dar uma resposta assertiva para o seu cliente para o seu contato tá E aí você tem duas formas de responder ele você pode responder por meio de texto tá que é esse node aqui que é um send Tex da da oosa tá bom onde ele vai gerar o o texto aqui da resposta e você simplesmente entrega com aapp beleza a outra forma também sendo que não vai ser abordada nesse tutorial também está disponível aqui no curso tá

bom que é a alternativa de você responder o cliente em voz então o cliente por exemplo vai lá e faz uma pergunta ah o que que é o Zap né Eh o meu agente vai interpretar essa essa pergunta dele tá por meio da transcrição ali do áudio ok E aí vai responder ele com áudio né ou seja vai falar assim olha a o Zap é uma API da Auto né não oficial de WhatsApp eh 100% dedicada com uma excelente estabilidade de conexão Enfim enfim tá E aí responde o o cliente com áudio ou seja o

fato de você implementar isso aqui no seu bote já dá um grande um já dá um grande diferencial aí no seu atendimento né porque nem todos têm essa funcionalidade aqui e o mais legal ainda é que você ainda pode usar um serviço de terceiro no caso aqui eu estou usando a Eleven Labs né Onde eu posso clonar a voz ou seja ao invés de o bot responder com uma voz aleatória né que à vez você pode escolher lá uma voz de um homem qualquer de uma mulher qualquer você tem a alternativa do bote responder com

a tua voz ol olha só que legal isso é como a pessoa tivesse ali falando com você mesmo né ela manda uma mensagem e a pessoa a pessoa vai lá manda Ah o que que é o Zap aí depois vem a resposta eu falando pra pessoa Oi Fulano tudo bem Aqui é o Hugo Olha a o Zap é isso isso isso isso ou seja a pessoa nem vai imaginar que tá falando com o robô ali tá então isso aqui é só uns insights né do que dá para você fazer no na automação do seu atendimento

com a inteligência artificial tá e volta a dizer tu tudo isso você vai aprender aqui no nosso curso de chatbot inteligente que vai est disponível na auto Academy Tá bom mas aqui né para esse tutorial eu só vou mostrar o exemplo dele enviando o texto com a resposta tá bom Ok bom falei demais aqui vamos testar isso aqui na prática tá para ver como é que funciona Tá bom então por exemplo eu já estou aqui com o WhatsApp aberto tá eh o WhatsApp que está conectado é o meu pessoal que é isso aqui o Hugo

pedes tá esse WhatsApp aqui que está aberto é da Auto então Auto é como se fosse o cliente eu vou estar mandando um áudio né Eh fazendo a a minha pergunta e o WhatsApp né que está sendo aqui utilizado né no na automação aqui ele vai responder conforme o que eu perguntar tá bom então por exemplo se eu chegar aqui e colocar uma coisa Qualquer por exemplo ó eu vou escrever um texto tá não vou escrever áudio eh oi vamos ver aqui se ele tem alguma forma de se comportar ó ele já saudou aqui olá

como eu posso te ajudar hoje tá isso aqui pessoal é a própria Inteligência Artificial que gera tá a inteligência artificial ela também consegue ali se interagir como se fosse um ser humano ou seja se se falar um oi ele vai vai dizer um Olá como é que eu posso ajudar entendeu eu não sei se eu perguntar aqui tudo bem né tudo tudo bem não sei o que que vai acontecer aqui deixa eu ver ah tá ó tá vendo já foi educado ó estou aqui para ajudar obrigado por perguntar como posso ajudá-lo hoje né seja não

perguntou se a pessoa também está bem né mas você vê que a inteligência artificial ela procura se adaptar o máximo possível ali eh ao comportamento do cliente tá mas vamos direto ao ponto então por exemplo vamos dizer que eu cheguei aqui tá e já vou mandar um áudio por exemplo eu vou perguntar o que é o intensivão nhn tá através de áudio sendo o quê uma observação eh Mita das vezes né dependendo da de como a pessoa vai falar vai perguntar a inteligência artificial pode não entender ou entender uma outra coisa Tá então Esse é

um dos Desafios de você criar chatbot que interpreta o áudio do do contato né do cliente porque o texto a gente sabe que é uma coisa certa né então por exemplo se eu chego aqui por exemp não vou enviar Só vou escrever né Por exemplo se chegar e falar assim ó o que é o intensivão n8n ou seja o texto já dá pro bot saber que é sobre o intensivão ntn tá Mas por exemplo se eu falar intensivão ele já não pode entender dependendo do caso né Tem muita gente que fala n8n Eu particularmente costumo

falar NN eu falo no inglês tá então Esse é um dos Desafios aí do bot eh que interpreta áudio Tá mas eu acredito que ao longo do tempo vá surgindo técnicas né de o bot conseguir entender o mais acertivo possível independente da forma como o cliente ali se pronuncia né é igual o Google Às vezes você chega lá pode falar alguma coisa o Google pensa que é mais ou menos aquilo e te D uma espécie de sugestão tá então é mais ou menos isso então eu vou fazer aqui o teste mas tentando falar da forma

mais clara possível né eu vou até usar em português eu não vou falar n vou falar n8n OK para poder facilitar aqui então vamos lá vou perguntar aqui ó eu gostaria de saber brevemente o que que é o intensivão n8n ó mandei áudio tá E olha só que incrível isso aqui o bot já conseguiu tu vê que assim questão de segundos ali né ele já conseguiu captar o áudio do cliente transcrever né para poder gerar o texto encaminhou ali pra Inteligência Artificial como prompt e a inteligência artificial já retornou a resposta com base na base

Opa foi até meio redundante com base na base de conhecimento eh baseado ali na base de conhecimento que eu tenho no ntn onde eu coloquei ali todas as informações eh dos produtos e serviços do auto né da mesma forma que que eu usei ali um workflow com essas informações você pode usar um PDF você pode usar uma base de dados tá Ou seja você pode determinar Qual é a fonte de dados ali da sua empresa tá bom E aí olha que legal ele retornou aqui ó o intensiv ntn é um curso mais completo da Auto

focado na plataforma ntn com 228 a distribuídas em 62 modos ele possui uma carga horária de 37 horas Seu principal objetivo é capacitar os participantes automatizar os processos manuais gerando resultados significativos para os seus negócios por meio da alta produtividade o valor do do curso é de R 597 o legal da Inteligência Artificial é que isso aqui não está montado lá na minha base de conhecimento isso aqui ele basicamente fez uma mesclagem então assim lá na base de conhecimento Tem sim a a definição do curso Quantas aulas Ele tem quantos modulos ele tem o valor

dele tá mas aí o bot que que ele faz Aliás a inteligência artificial ela vai pegando todas essas informações e ela monta uma frase em cima disso Isso que é o legal que acaba ficando uma coisa bem humanizada é como se fosse uma pessoa que tem conhecimento ali do teu produto do teu serviço e ele vai te responder com base nesse conhecimento é exatamente o que a inteligência artificial está fazendo aqui por isso que fica incrível tá tá E aí É claro aqui foi dado uma resposta bem completa tá mas aí vamos dizer que a

inteligência artificial não tivesse retornado por exemplo o valor do curso tá eh lembre que eu falei para você que o fato de a gente ter aqui a memória do agente significa que Com base no histórico da conversa eu não preciso novamente citar o que eu estou tratando ali na conversa por exemplo se eu chegar agora aqui e perguntar assim eh E qual é o valor o bot ele já vai entender que eu estou me referindo ao intensivão etn por causa do histórico Deu para entender eu não preciso chegar e falar aqui e E qual é

o valor do curso intensivão n8n eu não preciso falar novamente o curso porque ele já sabe com base nesse histórico ou seja ele tem memória Tá então vamos fazer o último teste aqui ó que é sobre o valor tá Ah sim entendi e qual é o valor Ó você vê que eu nem falei curso nem nem ó olha só que legal o valor do intensivão ntn é de r$ 97 esse curso completo vai te capacitar automatizar eh processos manuais e gerar resultados significativos para o seu negócio através da alta produtividade bacana isso aqui né Então

pessoal isso aqui foi só um um resumo né do da do tipo de automação sabe o nível eh de profissionalismo que você pode usar aí na sua automação de atendimento de WhatsApp tá bom eh Espero que você tenha gostado desse vídeo deixa aí um joinha que com certeza é algo que abriu tua visão aí tá para para infinitas possibilidades e se inscreva no canal OK venha fazer parte aí da nossa comunidade aqui no YouTube para que a gente possa continuar tendo esse apoio e continuar crescendo cada vez mais tá bom então muito obrigado pela atenção

um grande abraço e te vejo numa próxima