ChatGPT já consegue GABARITAR o ENEM?

63.83k views2306 WordsCopy TextShare
Manual do Mundo
Participe de graça da Imersão Dev Back-end da Alura e do Google: https://alura.tv/manualdomundo-imer...
Video Transcript:
chat GPT consegue gabaritar o Enem e pior se ele conseguir Será que a gente ainda Precisa de escola calma calma calma não tô falando para ninguém desistir da escola fica até o final do vídeo que você vai entender porquê mais ou menos um ano e meio atrás quando teve aquele buom do chat GPT Todo mundo começou a descobrir que existia começou a usar a gente colocou o bichinho para resolver uma prova antiga do Enem e ele foi relativamente bem ele foi Acima da média dos brasileiros quer dizer a máquina naquela época já conseguia fazer a
prova de um jeito que a maior parte das pessoas não conseguem só que muita coisa mudou quando a gente fez o teste o chat GPT só aceitava texto você não podia colocar imagem PDF para ele ler então a gente gastou horas e horas e horas várias pessoas colocando ali as questões a gente teve que usar a prova para pessoas que não enxergam pro chat GPT conseguir entender as imagens isso tudo ficou no passado não só ele aceita um PDF inteiro agora como você pode colocar imagem para ele ler e o bicho tá muito mais inteligente
acerta muito mais mas e se usaram o chat GPT para fazer as questões do Enem a ele vai saber como esse é um assunto que vai literalmente mudar a vida da gente todo mundo que tá assistindo aqui tá sendo impactado ou vai ser impactado por inteligência artificial em algum momento eu chamei uma pessoa que entende muito mais do que eu pra gente conversar sobre isso que é o Guilherme Silveira lá da lura então aproveitando o cenário do podcast aqui com o gui porque é uma conversa que daria umas 2 horas a gente vai ter que
fazer em 5 minutos a gente tá esperando uma nota bem maior agora no mené você acha que eu acho que se vocês usarem o o1 Então vai ser bem mais alta são 90 questões chutam alguma coisa só pra gente ver eu chuto vou chutar 90% porque não já que a gente falou no 90 Vamos chutar 90% Tá bom eu acho Vai um pouco mais ainda eu chutaria os 95% vai errar pouca coisa é que se eu chutar baixo Eu me garanto mais é só por isso é só por isso mas Aí surge uma pulga atrás
da orelha que é a dúvida cruel dessa história se a gente tem uma máquina que ela sabe né ela consegue praticamente gabaritar uma prova da escola por que que ainda tem que existir escola Nós seres humanos que que é importante pra gente quando a gente tá aprendendo a lidar com o mundo é aprender pensamento crítico lidar com problemas como é que eu resolvo estratégias de solução de problemas isso que é importante PR a gente uma prova como Enem ela tinha antigamente em pedagogias antigas esse teste de tipo Será que a pessoa decorou tudo decorou as
fórmulas sabe aplicar as fórmulas e hoje em dia não a visão é ela consegue entender um problema então é muito mais pensamento crítico análise e compreensão de texto você precisa analisar Entender no momento que você entendeu Você joga na fórmula e acabou o computador resolver isso é indiferente pra gente a gente continua continua precisando ensinar nossos alunos a fazer esse tipo de atividade porque o que o Enem Teoricamente tá testando são essas habilidades eu sei que tem muita gente que entrou nesse vídeo só para saber se o ch GPT vai bem no Enem Mas eu
também sei que aí do outro lado tem muita gente que gosta de tecnologia que gosta de entender como as coisas funcionam e que até gostaria de trabalhar na área mas ainda não teve chance de tentar de botar a mão na massa ali para ver se aquilo mesmo quer fazer então se você é uma dessas pessoas minha dica aqui é que você participe da imersão Dev backend da alu do Google backend é aquela a parte que fica por trás de um site que faz ele funcionar como se fosse um motor de um carro mas você não
tá enxergando então nessa imersão você vai fazer um projeto do zero aprendendo o básico da ferramenta nodejs usando a inteligência artificial do Google o Gemini é uma oportunidade muito legal de conhecer a lura os instrutores super especializados que eles têm lá e ainda participar da comunidade deles que dá todo um suporte vão ser cinco dias de imersão já tá para começar e as inscrições São por tempo limitado Então corre ver na descrição do vídeo como é que funciona e é de graça E é lógico que a gente também tá deixando aí na descrição do vídeo
um link para você poder se matricular na lura com desconto e aproveitar aquele catálogo absurdo de cursos que eles têm tanto na área de backend como em praticamente todas as áreas de ti e ainda um pouco mais bom agora vou ter que esperar as pessoas terminarem a prova do Enem porque dessa vez a gente vai fazer de um jeito diferente as inteligências artificiais estão aprendendo de um jeito muito rápido então se eu deixar para testar o Enem 15 dias depois que a prova aconteceu já vai est ali na memória já vai ter a prendida a
resposta de todas as perguntas então A ideia é pegar o chat GPT de surpresa ele nem sabe quais são essas questões ainda a gente vai botar exatamente no momento em que a prova for publicada que as pessoas tiverem acesso que vai acontecer no final de semana e não é hoje é lá no futuro hoje é domingo Acabou de acontecer em Enem eu tô aqui num hotel em Belo Horizonte porque eu fiz o lançamento do livro em ciclopédia britânica para curiosos Acabou de acontecer o lançamento e o pessoal lá no manual do mundo colocou o chat
GPT teve para resolver a prova às 7:30 da noite isso significa que nenhum cursinho tinha colocado ainda o gabarito da prova na internet então é impossível que o chat GPT tenha procurado na internet a resposta dessa prova porque essas respostas ainda não estavam lá e a gente também não tinha o pdf oficial da prova então a gente pegou uma foto que o G1 tirou da prova da prova Verde tentou jogar no chat GPT por imagem mesmo ele não conseguiu resolver por imagem a gente passou por um ocr que é um aplicativo que consegue identificar as
letras ali transformar tudo aquilo em letras de fato e gerar um novo PDF E esse sim a gente colocou de novo pro chat ter resolver que também não conseguiu porque era muito grande ele se confunde quando você coloca um PDF muito grande e aí a gente dividiu em três partes olha só a pergunta que a gente fez você vai me ajudar a resolver essa prova do Enem eu vou pedir as respostas e quero que você resolva a questão me diga qual é a alternativa correta dizendo a letra correta e o texto da alternativa correta vamos
começar E aí olha que interessante nas primeiras 30 perguntas ele foi respondendo meio que de cinco em cinco enroscando depois quando a gente postou a segunda parte ele deu uma planilha com as respostas e da terceira vez Ele já respondeu tudo uma vez só colocou lá as alternativas corretas Mas e aí conseguiu acertar tudo ou não essa prova tem 90 questões 45 São de linguagem das quais 40 de língua portuguesa e as outras cinco podem ser de espanhol ou de inglês o aluno que escolhe tá e na segunda parte as outras 45 São de ciências
E aí vem uma das coisas mais interessantes a gente não tem o gabarito oficial ainda da prova o mec ainda não divulgou então a gente tá acompanhando a correção do objetivo e do ângulo o ângulo já corrigiu tudo o objetivo corrigiu quase toda a prova então a gente vai meio que mais ou menos entre esses dois cursinhos aí vou explicar Porquê eles mesmos os professores dos cursinhos discordam de algumas respostas então o ângulo da uma o objetivo da outra e sabe o que acontece com o chat debt das 90 questões aconteceu isso três vezes dos
cursinhos discordarem e o Che chpt errar mas vamos lá errou ou acertou inglês cinco questões errou duas e vergonhoso para quem fala Originalmente inglês hein chat GPT de espanhol também são cinco questões ele acertou três considerando o gabarito do ângulo acertou quatro Considerando o gabarito do Objetivo em português são 40 questões ele acertou 36 eu considero uma nota absurdamente boa em ciências humanas objetivo não terminou de corrigir ainda a gente vai considerar só a correção do ângulo de 45 ele acertou 43 no geral então nessa primeira prova que tem 90 perguntas o chpt acertou simplesmente
82 é uma nota muito legal o aluno para chegar nisso tem que ser bom para caramba mas calma que a nota do dnem não é calculada assim ela é calculada com base na teoria da resposta ao item que que significa isso uma pessoa que acerta questões que quase todo mundo errou ganha mais pontos se acerta questões que todo mundo acerta ganha menos pontos aí a gente tem que colocar numa calculadora que faz essa simulação de como seria a nota tá quando a gente fez o Enem de 2022 1 ano e meio atrás foi um tempo
depois da prova em linguagens ele tinha tirado a nota de 650 nesse ano tirou a nota 733 em humanas 1 ano e meio atrás 742 agora 794 pessoal é uma nota boa pra caramba praticamente bariton humana Mas calma que ele fez a redação também a gente pediu para fazer redação ele faz praticamente Num Clique e Depois mandamos para um professor que corrige redações de vestibular tá ele trabalha corrigindo redações de vestibular de verdade a nota do chat GPT foi de 760 pontos Quais são os pontos positivos do chat GPT ele faz tudo certinho tem uma
habilidade boa ali de estruturar de desenvolver argumentos e coesão textual Tudo bem então é um português correto é um português certinho mas aí Vem uns probleminhas de chat GPT o famoso tal de texto de chat GPT o vocabulário ele é um pouco pobre ele não faz construções complexas tá tudo certo mas bastante simples falta repertório sociocultural Ou seja é uma pessoa meio vazia o texto não tem personalidade Olha que interessante que o professor escreveu a proposta apesar de apresentar ideias bonitas e com potencial de impacto peca pela falta de concretude pela identificação explícita de Agentes
responsáveis ou seja o chat GPT ele faz um texto meio genérico meio fugindo ali tentando agradar todo mundo isso prejudica o texto não dá para tirar me desse jeito Resumindo candidato apresenta boa capacidade de estruturação e coerência argumentativa mas precisa melhorar a profundidade das ideias a originalidade do vocabulário e a presença de um repertório sociocultural mais sólido e elevar o nível da sua redação e torná-la mais impactante e autoral é por isso que o ser humano que escreve bem ainda escreve muito melhor que chat GPT Resumindo esse resultado aqui primeiro a gente tem uma ferramenta
muito melhor do que 1 ano e meio atrás foi praticamente 5 minutos pro chat GPT fazer tudo isso segunda coisa algumas questões que ele errou até os cursinhos discordaram entre si a prova tá difícil E aí ele vai ter dificuldade naturalmente terceiro é que a nota melhorou muito de 1 ano e meio para cá ou seja esse negócio tá evoluindo a Passos largos eu acho que dentro de algum tempo a gente vai ter uma máquina que gabarita isso tranquilamente e um alerta que talvez seja muito importante para você levado desse vídeo ele não gabaritou ele
não acertou tudo errou uma parte ainda das questões mais ou menos 10% das questões tá errada então quer dizer se você confia completamente você tá confiando numa coisa que de 10 tira certa 9 bom vamos continuar acompanhando a evolução de tudo isso porque a gente quer no final da contas que essa inteligência artificial que toda essa evolução da tecnologia seja usada pro bem E para isso a gente tem que ficar de olho nela fechou abraço para vocês um detalhe importante aqui no final a gente considerou as respostas dos cursinhos até 9:30 da noite depois disso
eles continuaram refinando as respostas e tudo mais teve algumas coisas que mudaram Então pode ter uma questão ou outra que deu diferente do que a gente falou a gente vai deixar aí na descrição do vídeo Tá e é importante nesse momento a gente reconhecer o trabalho desses professores de cursinho me eles ralam muito no dia da prov para conseguir trazer as respostas pra gente antes da saída do gabarito oficial e dar um pouquinho de alento aos nossos corações e aí eu queria agradecer especialmente ao Professor Eduardo Marinho que corrigiu a nossa redação e fez um
trabalho brilhante ali apontando todos os erros ou as incertezas que o chpt ainda tem e uma última coisa é que a gente estranhou muito ele ter errado as questões em inglês depois a gente foi ver e descobriu que essas questões tinham bastante imagem então é difícil de ele conseguir ler a imagem relacionar com a pergunta e tudo mais isso ainda não tá tão bem desenvolvido e a gente acha que isso vai acontecer bastante matemática se você acha que vale a gente testar o chat jpt no ENEM de matemática no domingo que vem deixa um comentário
aí embaixo pra gente saber fechou
Copyright © 2024. Made with ♥ in London by YTScribe.com