Colocamos Inteligência artificial pra fazer ENEM: Olha no que deu!
Seja sincero comigo você acha o Enem Difícil você acha que uma máquina Conseguiria resolver o Enem Hoje a gente Vai testar o chat GPT que é essa Inteligência artificial que está na Modinha tá todo mundo falando por aí Será que ela consegue resolver uma prova Do Enem de cabo a rabo Será que essa Máquina é capaz de gabaritar uma prova Será que acabar de acertar planos metade Das questões do Enem talvez tenha gente Que morre dando uma caverna que esteja Assistindo agora que nunca tenha ouvido Falar nesse tal de chat GPT que que é Esse negócio é um site que tá rodando Uma inteligência artificial absurda por Trás e que você consegue colocar as suas Perguntas pedir para ele fazer coisas e Faz para você o grande chance dessa Inteligência Artificial é se comunicar Bem então você coloca uma pergunta do Dia que você quiser do jeito que você Fala mesmo ele vai te responder de um Jeito muito bem escrito muito bem Elaborado Vamos fazer um testezinho o Site é esse aqui tá chat.open eai.com Você entra lá com a sua conta do Google Não precisa colocar dado nenhum e você Já consegue usar tem tanta gente usando Que sempre dá problema lá mas vai no fim Das contas meu pedido aqui Escreva um Texto justificando porque o Pelé foi Melhor que o Maradona ele Maradona são Considerados dois dos melhores jogadores
De futebol de todos os tempos Cada um Com as suas próprias habilidades e Conquistas notáveis no entanto há várias Razões pelas quais Pelé é considerado Como muitos como o melhor jogador de Futebol de todos os Absurdo a quantidade de argumentos o Jeito que esses argumentos são colocados Enfim é um texto muito bem descritivo Essa busca aí põe no Google e procurou o Tempo por [Música] Essa inteligência artificial não acessa A internet para dar resposta ela foi Treinada com dados da internet até 2021 A máquina não sabe por exemplo que o Pelé morreu agora no final do ano Passado esse texto não foi copiado de Outro texto ele foi criado do zero a Partir do treinamento que a máquina Recebeu Vamos fazer uma pergunta um Pouco mais científica aqui sem tentar Induzir a máquina dar uma resposta e ver O que acontece porque o ser humano não é Capaz de voar seres humanos não são Capazes de voar de forma natural devido A sua anatomia e fisiologia nossos ossos São muito densos e pesados em relação ao Nosso tamanho e massa muscular o que nos Impede de gerar a força necessária para Sustentar o nosso próprio peso no ar Além disso não temos asas ou outras Adaptações era dinâmicas que permitissem Ao nosso corpo se mover eficientemente
No ar apesar disso os humanos são Capazes de voar usando tecnologia como Aviões balões e paraquedas acho que a Resposta tá Impecável né Vamos impedir Agora prescrever um texto meio do zero Meio do nada o meu melhor amigo por Causa de política Escreva uma mensagem De whats pedindo desculpas Querido amigo sinto muito pelo que Aconteceu ontem eu sei que nós temos Opiniões políticas diferentes e eu não Deveria ter permitido que isso afetasse Nossa amizade peço desculpas pelas Coisas que eu disse e espero que Possamos continuar sendo amigos abraços Eu nem escrevi o WhatsApp direito e tal Fiz uma frase super simples e ele gerou Essa resposta para mim você sentiu o Poder do negócio né muito diferente da Gente simplesmente procurar no Google A Resposta é muito diferente de uma Resposta que um assistente pessoal tipo Alex a Siri Google assistente daria pra Gente porque ele faz coisas muito mais Complexas então tem muita gente pegando Essa inteligência artificial e rodando Provas em cima dela tipo rodando prova Lá do OAB dos Estados Unidos prova que Se faz para certificar médico etc e o Computador está super bem ele tá Acertando o número de respostas que Muitas vezes é suficiente para passar Nesses exames então a gente resolveu Rodar o Enem aqui vamos rodar a prova
Que mais brasileiros fazem talvez a mais Importante de todas a gente viu que Algumas pessoas já feito alguns testes Rodado algumas perguntas mas a gente vai Rodar o Enem inteirinho 180 perguntas mais a redação duas Questões importantes aqui primeiro que a Gente vai rodar o Enem de 2022 então a Máquina não teve acesso a essa prova Porque provas mais antigas Pode ser que As respostas sejam lá no aprendizado que Ela teve e segundo que seria muito Difícil a gente colocar as imagens que Tem nas perguntas dentro do chat GPT Aqui não tem a opção de você subir uma Imagem e grande parte do Enem é feito de Mapa de gráfico de coisa que você tem Que interpretar ali mas tem uma solução Para isso existe uma versão do Enem que é feita para as pessoas que não enxergam Então vai um Ledo lá uma pessoa que lê a Imagem para ela e o Enem já tem uma Descrição oficial daquela imagem para Que todas as pessoas que não enxergam Tenham a mesma oportunidade Então a Gente vai pegar essa prova que tem a Descrição de cada imagem para o chat de Ept poder entender ali o que tá Acontecendo e responder cada pergunta Parece facinho mas na hora que você vai Fazer você entende por que ninguém tinha Rodado ainda o Enem inteiro e nem tem PDF você tem que ir lá selecionar a Parte que você quer que ele responda só
Que você não consegue selecionar a Pergunta inteira várias vezes tem que Selecionar um pedaço aí você vai jogar No chat PT antes você tem que escrever Qual é a alternativa correta Aí depois você cola o pedaço vai lá pega Mais um pedaço Cola e aí às vezes ele Demora um pouquinho para responder Quando não tá muito interditado não tem Um monte de gente mexendo ao mesmo tempo Ele dá a resposta não agora por exemplo Alguma coisa deu errado por favor tente Recarregar a conversa vou de novo copio Venho recarrego colo aí sim gosto pela Prática de leitura letra B vamos ver Vamos abrir o gabarito aqui um inglês Que é o que eu tô fazendo agora B Acertou a resposta se eu demorar dois Minutos em cada pergunta eu vou levar 6 Horas vamos pedir uma ajudinha pro Pessoal aqui do manual né dividir uma Prova em Cinco partes cada um ficou com Um quinto vão fazer essas máquinas Trabalharem pra gente [Música] Gim do céu eu jurava que ia ser mais Fácil fazer isso aqui a gente começou Era 10:30 da manhã agora são 10:50 da Tarde cinco pessoas trabalhando em cima Desse negócio a máquina deu várias Rateadas no meio do caminho vou começar Pela redação eu colei o tema inteiro lá E pedi para ele fazer a redação para mim Afinal de contas é uma inteligência
Artificial de linguagem então não se Comunica muito bem então eu botei o Textão todo da proposta de redação que é Para fazer uma redação sobre povos Tradicionais e a inteligência artificial Me deu um Bocão de texto Sem separar em Parágrafos Aí não vale né ficar ruim eu Pedi para separar em parágrafo o legal Isso aqui é uma conversa você pode pedir Uma coisa em cima da resposta ele Altera A resposta você vai bater numa bola aí Ele começou a escrever a redação de novo Com outras palavras o que já estava Escrito Só Que Não Terminou de escrever Ficou sem fim aí eu pedi um título ele Colocou um título colocou de novo a Redação Sem Fim de novo Redação ele começou a escrever redação Do zero de novo ou seja fez vários Começos de redação sem terminar aí eu Peguei o último começo que ele tinha Feito e falei ó esse aqui é um começo Termine termine o texto abaixo aí ele Terminou perfeitamente vou ler um Pedacinho para vocês aqui desafios para Valorização de comunidades e provas Tradicionais do Brasil Esse é o título As comunidades hipóteses tradicionais no Brasil enfrentam diversos desafios para Serem valorizados e terem seus direitos Respeitados entre eles a falta de Reconhecimento oficial é ameaça as suas Formas tradicionais de vida e a Exploração de suas terras lendo a
Redação eu acho que gramaticamente ela Tá muito bem feita Mas ela é meio sonsa Parece que foi escrita por uma máquina o Que não deixa de ser verdade afinal de Contas ela foi escrita por uma máquina Mas ainda assim eu acho que é uma Redação bem feita se fosse uma prova eu Acho que daria uma nota boa ali mas eu Não sou especialista nisso eu chamei o Professor nos lenta é um canal muito Bacana sobre português para ele falar o Que ele achou dessa redação então ele Gravou um videozinho pra gente vamos dar Uma olhada Fala aí Breno tudo bem meu velho olha só Recebi sua redação tô com ela aqui e já Batendo o olho posso dizer para você ela Não é nota 1000 por quê Bom primeiro no Enem é recomendado que você utilize Quatro parágrafos na escrita da sua Redação para poder organizar melhor os Conteúdos então um de introdução do Desenvolvimento e um de conclusão Maravilha agora aqui você já vê que tem Mais do que isso Outra coisa o Pará tem Que ser mais ou menos do mesmo tamanho Assim tá para ter uma organização melhor Também do conteúdo também não acontece Nesse aqui e uma coisa importante que Você tem que ter conectivos entre Parágrafos pelo menos dois no Enem e Aqui nós temos um que lá no penúltimo Parágrafo a expressão Além disso agora Lendo a redação eu já percebi uma coisa
Na introdução ela tá muito curta ela Podia dizer na introdução Quem são os Povos tradicionais do Brasil eu sei que Faz isso no segundo parágrafo então eu Poderia juntar os dois parágrafos Parceiros primeiro outra coisa no Desenvolvimento o ideal é que os Parágrafos tem o começo meio e fim Dentro do próprio parágrafo no primeiro Parágrafo do desenvolvimento isso não Acontece vai acontecer só no segundo Terceiro e a conclusão que ela é Essencial precisa ter cinco elementos Porque na conclusão precisa trazer uma Proposta de intervenção e cinco Elementos são ação a gente Efeito detalhamento são cinco elementos Que vão trazer nota para o aluno e a Ação representada pelo verbo nesse caso Que tem mais de um verbo Não precisa não é nem um verbo só o suficiente então Aqui ele tem o verbo lá garantir a Proteção de seus direitos essa é uma Ação dele vem com o modo através de Políticas públicas beleza mas faltou o Quê a gente efeito detalhamento E aí não Tem como ser nota 1000 beleza para falar A verdade nem eu imaginava que tinha Tantos detalhes assim que tinha que ser Seguidos É talvez se a gente colocasse Todas essas informações ali na hora de Pedir a redação a máquina fizesse uma Redação mais adequada pro Enem mas essas Informações não estavam na prova do Enem
Então eu coloquei só que estava na prova Depois conversando bastante com nós pelo WhatsApp ele me falou que é uma redação De um aluno médio porque o texto é meio Raso tem um monte de informações ali sem Profundidade tem uma argumentação boa Foram 180 perguntas em várias a máquina Simplesmente se negou a trabalhar falou Não tem informação suficiente para Responder as perguntas não vou responder Essa pergunta foi que aconteceu aqui por Exemplo uma pergunta número 115 falar Não é possível determinar Qual é a opção Correta pois a questão não fornece Informações suficientes E aí a gente Teve que dar uma cutucada não mas eu Quero a resposta mesmo assim geralmente Depois disso ela dava resposta mais Errava ou às vezes nem quis dar a Resposta e aí é lógico como um bons Avaliadores se o candidato não quer dar Resposta a resposta tá errada né teve Uma outra questão a 70 aqui de história Por exemplo que ele não quis dar nenhuma Das alternativas e escrever um parágrafo Lá que ele achava que tava correto Independente tá correto ou não tinha que Escolher uma alternativa a gente Forçou A mão respondeu de novo e deu uma Alternativa errada no final o vídeo Ficaria muito chato se eu fosse comentar Todas as questões então o que que a Gente fez deu print em tudo e guardou no Arquivo zip então se você quer ver como
Foi a nossa conversa dá para ver questão Por questão inclusive todos os links Todas as referências que a gente usou Aqui na descrição do vídeo tá é só dar Uma olhadinha lá nós vamos lá eu sei que Você tá muito ansioso aí do outro lado Querendo saber quanto que acertou dessa Prova mas antes disso é importante eu Falar um negócio muito legal sobre o ENEM a nota do ENEM não é a porcentagem De acerto você não vai tirar uma nota de 0 a 10 baseado no número de questões que Você acertou mas na importância daquelas Questões é um sistema inteligente que Chama teoria de resposta ao item ou tri Que leva um monte de coisa em Consideração por exemplo se você tá Errando a maior parte das perguntas Fáceis e de repente você acerta uma Difícil é muito provável que você tenha Chutado E aí o sistema vai desconsiderar Aquela nota ou dar uma nota baixa para Aquele seu acerto ou o contrário você Tá Acertando muita coisa E aí Você erra uma Pergunta todo mundo erra aquela pergunta E o sistema percebe que Poxa aquela Pergunta Tem alguma coisa errada vamos Desconsiderar aquela pergunta então é um Jeito que a prova se auto avalia nas Respostas dela mesmo é um negócio muito Mais inteligente do que uma simples Porcentagem de acerto O problema é que Não tem como a gente aplicar essa regra Ao que a gente acabou de fazer porque a
Gente não tem os dados que o Enem usou Para avaliar a teoria de resposta ao Item então a gente só vai ter uma Porcentagem mesmo que foi a seguinte de Linguagem de 45 a máquina acertou 32 Ciências humanas de 45 a máquina acertou 40 ciências naturais de 45 21 e Matemática teve uma questão que foi Anulada então de 44 acertou 12 resumão Conclusão da história fizemos o Enem no Chat chateio que deu de 179 perguntas Porque uma foi anulada ele errou 74 e Acertou 105 dá um aproveitamento de 59%. então quase 60% de acerto depois Que a gente já tinha gravado o vídeo a Gente ficou conversando aqui muito tempo Poxa será que não dá para comparar isso Com um ser humano se fosse um ser humano é um aluno bom é um aluno ruim a nota Está acima da média está dentro da Média A gente conseguiu estimar mais ou menos Então o que que a gente fez colocou Essas notas dentro de um simulador de ENEM que consegue dar uma nota parecida Com a do Enem mesmo seguindo mais ou Menos a teoria da resposta ao item então A gente usou simulador do missalva e as Notas são essas que você pode ver aqui Do lado Inclusive tem uma faixa ali né Que a nota porta dentro daquela faixa Por exemplo linguagem de 588 a 699 então é uma estimativa dentro dessa estimativa Anota sem contar a redação Fazendo de
Conta que não existiu a redação é de 630 no ENEM de 0 a 1000 é de 630 só pra Vocês terem uma ideia a média do Enem Sem contar a redação dos últimos 4 anos Aí não tô contando 2022 porque não tem a Nota em 2022 mas de 2021 para trás Quatro anos é de 500 e 15 ou seja a Inteligência artificial conseguiu uma Nota que tá 22%, acima da média é um aluno que tá Melhor que os outros no geral vou Confessar para vocês que eu esperava um Resultado melhor eu achava que a máquina Ia gabaritar e acertar 90 como eu vi na Maioria dos materiais sobre perguntas Que essa máquina é capaz de responder Mas tem quatro Barreiras quatro Probleminhas aqui que fazem o que seja Muito difícil a máquina acertar tudo no ENEM a primeira são as imagens ele nem Tem imagem para caramba e mesmo que a Gente esteja usando a prova que foi Feita para pessoas que não enxergam a Descrição das imagens é super complexa Eu vou dar um exemplo aqui questão 117 a Imagem que tem essa aqui é um globo Terrestre ali com incidência de sol tá Tudo bem Eu imagine simples a gente ver A descrição dela é isso aqui ó é uma Coisa gigantesca é difícil de você Imaginar a figura a partir da descrição Não é nada simples então Ó eu tiro meu Chapéu para quem não enxerga e faz o Enem é difícil pra caramba é um belo de
Um desafio e lógico que pra máquina que é boa de entender texto na hora que você Coloca uma figura dessa dá uma balançada Geral segundo ponto é que nem em Português beleza essa máquina fala Português mas a gente já fez vários Testes aqui no manual e sabe quando a Gente coloca coisa em inglês ela Funciona bem melhor então provavelmente Ela perdeu alguns pontos ali porque Tinha que falar muito bem português Terceiro ponto é que o Enem Exige uma Interpretação de texto absurda tem Várias questões que ela errou que a Gente foi ver porque que tinha errado e Era muito difícil de achar a resposta Certa porque dependia de uma série de Conexões que você tem que fazer para Entender o negócio então ele é difícil Mesmo e o quarto ponto é que essa Inteligência artificial ela é criada Para linguagem ela é criada para Conversar bem com a gente e isso a gente Percebe que ela faz muito bem Praticamente sem erros de português Entende tudo que você fala interpreta Bem os textos mais simples mas na hora Da Matemática escorrega em casca de Banana até não poder mais consegue Entender a proposta consegue saber qual A forma que vai usar na hora de Executar A forma é numa conta de divisão então é Mais ou menos como você pegar um baita De um bom alicate e tentar furar a
Parede com ele ele não foi feito para Aquilo não vai dar muito certo você pode Até conseguir mas Minha boca acertou 71% de português e 89% de ciências humanas é uma máquina Muito boa para isso aí é que entra a Polêmica nas escolas muita gente na hora Que vi isso aqui é a primeira vez já Falou poxa não preciso mais fazer Redação não preciso mais fazer trabalho De história geografia de português Responder perguntas complexas porque eu Boto aqui nessa Inteligência Artificial E ela responde melhor do que eu mesmo Responderia E o pior é que é verdade Como é que os professores vão pedir Essas tarefas agora isso me lembrou Muito quando eu estava na quinta série e Surgiu o computador as primeiras pessoas Da minha classe começaram a ter Computadores e impressoras e queriam Fazer o trabalho no computador e o Professor não deixava Porque no momento Em que você faz o trabalho no computador Não é mais sua letra que tá no papel não Tem como o professor saber se foi o Aluno que de fato digitou aquilo pode Ser a mãe pode ser um irmão pagou um Amigo para fazer e é lógico que depois De alguns anos aí caiu por terra não Fazia mais sentido você comprar um monte De folha de almaço ficar corrigindo que Você errava ali com a caneta passando Corretivo entregava trabalho todo torto
Com letras de várias pessoas que o Professor vai se lascar vão conseguir Ler todo mundo começou a fazer no Computador não tinha problema nenhum E é Isso que eu acredito que vai acontecer Com essas ferramentas Inteligência Artificial a gente vai aprender para que Que ela serve como é que funciona e se Eu fosse professor nesse momento eu já Entraria lá cheque ponto openery.com Testaria uma série de coisas para ver Como é que a gente consegue dar tarefas Para os alunos agora que eles têm Essa Ferramenta na mão talvez a gente tem que Bolar jeitos diferentes de dar a tarefa Porque simplesmente perguntar Quais Foram os motivos da Revolução Francesa a Máquina vai conseguir responder com Muita facilidade aliás vamos perguntar Pra ela pra ver se responde direito Dívida Nacional a França estava Endividada de vida das Guerras às Despesas do rei dos 16 porque levou uma Crise financeira desigualdade Econômica A maioria da população francesa vivia na Pobreza enquanto a nobreza e clero Dificultava de privilégios de riquezas e Ele ter assim próprio de liberdade a Maioria da população francesa era Analfabeta e não tinha direitos Políticos influência de 10 iluministas As ideias de liberdade igualdade de Fraternidade promovidas iluministas Inspiraram muitos franceses a lutar
Contra a monarquia absoluta e a Desigualdade social e a crise do Estado As Finanças francesas estavam em crise e Os impostos eram muito altos para a Maioria da população Vale aquele joinha Ou não vale quer ver mais uma coisa Muito legal sobre a inteligência Artificial ela também é capaz de gerar Imagens a gente gravou um vídeo há pouco Tempo mostrando como é possível treinar Uma máquina para fazer imagens minhas a Partir do zero é muito legal