Como Automatizar Web Scraping no Make.com em 15 minutos

E aí pessoal o é piris aqui e nesse vídeo eu vou mostrar para vocês como extrair dados de qualquer website de maneira automática com inteligência artificial essa daqui é a maneira mais rápida que eu encontrei de você conseguir extrair dados de qualquer Website conseguir criar uma mensagem personalizada a partir dos dados desse Website sem você precisar mexer um dedo totalmente automático utilizando make. com e inteligência artificial também e o melhor de tudo é que você pode fazer isso em massa de maneira grande de maneira de grande escala para prospectar clientes ou até para conseguir dados dos seus concorrentes e fazer uma campanha de parasitarem dentro da internet que a gente sabe que acaba sendo muito eficiente Então beleza eu tô muito ansioso para mostrar esse pequeniníssimo sistema aqui para vocês que com certeza vai agregar muito valor por mais rápido que ele seja eu tenho certeza que é algo que não nem todo mundo tá tá por dentro disso então beleza esse daqui é o sistema do make. com que eu falei para vocês Ele é super simples muito Visual na verdade eh ele é bem visual Mas eu ainda eu imagino que tenha várias coisas aqui aqui que eu devo explicar para vocês antes de vocês surtarem por exemplo alguns de vocês podem não estar familiarizados com esse módulo aqui de http ou módulo de text passer mas com certeza esse módulo aqui do antropic do Cloud Ah com certeza deve ser muito mais confortável para vocês porque é muito parecido com o módulo do chat GPT a gente só faz um prompt pra inteligência artificial para definir o resultado final que a gente vai receber dela Tranquilo então vamos lá o módulo http ele nada mais serve que para extrair o conteúdo do Website em si e aqui eu coloquei o meu me próprio Website ã para não perturbar ninguém para utilizei o meu próprio Website só para não violar os direitos de imagem de ninguém aqui beleza e eu vou mostrar na prática o que acontece quando eu coloco todo o conteúdo do meu Website Então esse aqui é o Website que eu coloco da minha comunidade do School para você aprender sobre automações com inteligência artificial e ofertar esses serviços para outras empresas e conseguir criar um negócio escalável com a agência de ia Ahã Então vamos lá deixa eu fazer aqui na prática a extração de dados desse Website aqui utilizando esse módulo http Beleza Eu só coloquei a URL do meu Website e o método aqui eu coloquei get para extrair todos os dados dele várias vezes eu faço aqui ã eu utilizo o módulo http dentro do meu canal nas minhas prévias automações eu faço uma diferença entre o módulo post e o módulo GAT para você que é mais amador nessa parte de automações o módulo post é quando você vai enviar ã um dado para um sistema que você tá fazendo uma chamada api e o módulo get é para você extrair dados desse sistema nesse caso aqui o sistema é um basicamente um site da internet que é aberto os dados Então vamos lá vou colocar para rodar só esse módulo eu venho aqui nesse botão de Run mod only e vamos ver o dado que a gente recebe aqui no outp deixa eu dar um zoom aqui para vocês eu venho aqui em outp data data é basicamente o resultado que eu consegui os dados que eu consegui extrair da internet e esse esses dados aqui gigantescos a gente não pode enviar esses dados de uma vez PR noss Inteligência Artificial por mais que a inteligência artificial Seja inteligente e consiga entender esses dados aqui a gente vai consumir muitos tokens da Nossa e você vai ter você vai acabar tendo uma uma surpresa no final do mês quando você receber os créditos da sua da sua inteligência artificial que você usa de consumo de api né se você colocou 50 de 50 é bastante coisa para falar a verdade se você colocou 0 na sua api do antropic se você enviar o código direto do seu Website ã Talvez isso daqui gaste bem rápido esses 10 tá Então a maneira que eu vi mais eficiente de você reduzir o seu custo de tokens é você colocar um text passer que é basicamente você pega todos os dados daqui que são Dados em HTML esses aqui todos esses dados são Dados em HTML tá escrito na linguagem de código HTML você utiliza esse mulo text passer HTML to text Ah e coloca o resultado data você clica aqui no nesse Campo branco e coloca a variável data que ele vai ã Como eu posso falar para vocês ele vai extrair ele vai reduzir bastante desse código aqui e vai transformar em texto direto ou seja vai ficar muito menor ele vai tirar todo o código e vai transformar tudo só em texto e vai passar só o texto pra nossa Inteligência Artificial e o módulo que eu dei o prompt que eu dei para Sea foi um um prompt mais legal que eu quero mostrar para vocês eu utilizei ah manipulação de variáveis em Jon aqui no make.

com que vai ser muito interessante para você conseguir definir esse essa automação aqui em grande escala que vai ser a cereja desse vídeo aqui especial para você que vai ficar até o final Então vamos lá ah você irá receber o scrape de um website em HTML e você deve analisar todo o conteúdo do Website e retornar um resumo em Jon Calma aí o que eles fazem como fazem e sua principal proposta de valor retorne neste formato descrição coloque a descrição do Website aqui proposta de valor coloque a proposta de valor aqui Não retorne nenhum texto adicional além do Jon em si e daí eu coloquei um outro bloco de texto se eu V aqui em content eu de um bloco de texto Mas eu posso adicionar mais um bloco de texto aqui em content nesse caso eu coloquei só dois content porque um vai ser o prompt e o outro vai ser o bloco de texto do HTML pass ou seja só o texto tirando o código HTML e aqui eu coloquei um System eu cliquei aqui em show Advanced settings só para certificar mais uma vez que ela não vai retornar nenhum conteúdo além do Jon em si porque se ele retornar algum conteúdo além do Jon vai ficar um pouco quebrado esse código aqui eu quero mostrar para vocês nessa parte adicional do fluxo tá para você conseguir fazer isso daqui em grande escala vamos rodar essa automação aqui pra gente ver o resultado que a gente recebe Legal vamos ver aqui a a resposta da Inteligência Artificial descrição a é a comunidade de aprendizado focado em Inteligência Artificial eles oferecem um programa de ensino que compromete que promete capacitar os participantes a dominar as ferramentas necessárias para criar sistemas de a do Zero Isso aquii é basicamente o que a gente faz o que a gente colocou lá no nosso Website mesmo nossa proposta de valor acelerar a jornada de aprendizado em ia fornecendo conhecimento prático e ferramentas para criar sistemas de ia rapidamente basicamente é isso e ele dividiu aqui em duas variáveis dezon e o Jon é exatamente a maneira que você faz para manipular variáveis dentro do make. com se eu quiser colocar se eu quiser fazer uma campanha de de envio de e-mails em massa para para essas pessoas a partir do Website dela por exemplo eu coloco aqui um vou criar uma planilha aqui eu vou colocar Website ah descrição eu devo deixar esse daqui um pouco maior né descrição e aqui proposta de valor deixar bem grande esses dois logo cara para facilitar meu processo sistema weing ok então eu quero receber em duas variáveis diferentes eu quero receber um campo com a descrição e um campo com a proposta de valor sendo que aqui o cloud ai ele me retorna só um campo inteiro ele eu só vou poder passar esse text response aqui eu não vou conseguir enviar só a descrição para essa coluna e nem só a proposta de valor para essa coluna aqui como como que eu faço para dividir esse essa descrição e essa proposta de valor eu utilizo esse módulo aqui Jon pass Jon e daí ele vai dividir esses dois deixa eu mostrar aqui para vocês deixa eu rodar só esse módulo vou pegar todo esse resultado da ia vou rodar só esse módulo aqui para vocês ver como ele fica maravilha você vê aqui já no resultado foi super rápido que ele me traz uma variável de descrição e uma variável de proposta de valor agora e eu consigo trazer essas variáveis dividido uma por uma lá na planilha do Google sheets ou seja para onde você queira manipular essa variável Tranquilo então esse passe Jon aqui ele é uma um conteúdo extra que vai acelerar muito mais o seu aprendizado e você vai conseguir fazer coisas muito mais maleáveis aqui dentro do make. com criar sistemas muito mais inteligentes do que só ficar preso numa resposta da EA você pode manipular essa resposta da ia e criar sistemas muito mais inteligentes era isso que eu queria falar mas vamos lá cara pra gente fazer isso daqui em massa eu não quero ficar colocando ã um site de cada vez eu quero enviar uma planilha cheia de websites aqui e conseguir extrair todos eles ao mesmo tempo então Maravilha cara vamos lá deixa eu mostrar para vocês na prática como que faz isso eu vou colocar mais uma vez aqui o meu Website vou colocar ã o Website da Apple e esses dois websites vão ser a pesquisa em massa que eu vou querer fazer aqui pro meu pra minha campanha de web scraping beleza e eu vou querer H receber a descrição e a proposta de valor desses websites lá na minha planilha do Google sheets Então vamos colocar aqui o módulo do Google sheets Primeiro de tudo vamos colocar o módulo do Google sheets aqui no início né Opa cliquei errado Google sheets deixa eu passar esse reloginho aqui para cá para mostrar que ele vai ser o gatilho da automação então se você não sabia como fazer isso agora você tá sabendo Google sheets ã watch vou colocar esse watch New Rose aqui all vou pegar a o ID dessa planilha para conectar rapidamente Maravilha e aqui você pode colocar o limite de quantos websit que você vai querer fazer a pesquisa ao mesmo tempo tá nesse caso aqui eu tinha dois eu vou colocar só dois mesmo você pode colocar Quantos você quiser basicamente eu vou deixar em dois aqui eu não vou deixar nada cara [Música] vou deixar assim Maravilha isso daqui Foi uma mudança que o make.