GPT-3.5 VS GPT-4: Comparando AI Bots

A OpenAI revelou recentemente o GPT-4, a versão nova e aprimorada do chatbot que conquistou o mundo. Quais são as diferenças entre o GPT-4 e seu antecessor GPT-3.5? Vamos comparar o GPT-3.5 com o GPT-4 e ver como ele é realmente mais inteligente.

Diferenças Práticas

Antes de chegarmos às diferenças de desempenho, porém, primeiro vamos examinar algumas diferenças práticas entre os dois. Em primeiro lugar, enquanto qualquer pessoa com uma conexão à Internet pode ficar online e usar o GPT-3.5, apenas as pessoas que optaram pelo plano pago do OpenAI (chamado ChatGPT Plus) podem mexer com o GPT-4. 

O plano pago custa $ 20 por mês (antes dos impostos) e não apenas oferece acesso ao GPT-4, mas também dá prioridade se a versão mais antiga estiver com carga pesada. Também torna as respostas com GPT-3.5 mais rápidas. Queremos dizer muito mais rápido também: uma vez que pagamos, parecia que não havia como parar!

No entanto, mesmo se você pagar, não terá acesso ilimitado ao GPT-4 como faz com o GPT-3.5. Em vez disso, você só pode solicitar um determinado número de prompts. Atualmente, você recebe 25 prompts a cada três horas, mas como esse limite muda constantemente, pode ser que, quando você ler isso, essas restrições tenham desaparecido.

Observe também que o GPT-4 é muito mais lento para responder do que o GPT-3.5. Embora isso provavelmente mude nos próximos meses, agora o bot demora um pouco para encontrar as respostas, então não espere fazer nada muito rapidamente com ele.

GPT-4 é mais inteligente

Como seria de esperar de uma atualização, o GPT-4 é simplesmente muito mais inteligente do que o GPT-3.5. Com isso queremos dizer que é mais criativo e melhor em entender o que você quer. Seu modelo de linguagem – repensá-lo como a forma como nos comunicamos e as palavras que usamos – está apenas anos-luz à frente. Você pode ver isso quando o alimenta com um prompt que contém algumas nuances.

Para este exemplo, decidimos por um prompt relativamente simples, inspirado neste tópico do Reddit , pedindo ao ChatGPT para “criar um exemplo de como seria um pequeno ensaio sobre fotossíntese se fosse escrito por uma criança de 10 anos. Incorpore erros que o escritor cometeria.” Os resultados são selvagens. Aqui está a opinião do GPT-3.5.

Não é tão ruim, o uso infantil da linguagem é bastante convincente, mas há algumas revelações aqui e ali. Seria uma criança muito esperta de 10 anos que escreveria isso. Agora confira o GPT-4:

Esta é uma chaleira de peixes totalmente diferente: há erros de ortografia, alguns problemas de gramática e, em geral, o uso da linguagem é muito mais convincente. Embora não seja perfeito, à primeira vista você acreditaria que seu sobrinho escreveria isso.

Essas mudanças se refletem em todos os prompts que você poderia fornecer ao GPT-4: seu uso da linguagem é simplesmente melhor e é muito melhor captar as nuances da fala humana, incluindo a sua. Embora você ainda precise ter cuidado ao formular os prompts , pode esperar uma saída muito melhor com menos trabalho.

fatos melhores

Juntamente com mais criatividade, o GPT-4 também é um pouco mais confiável do que o GPT-3.5. Quando foi lançado pela primeira vez, o GPT ficou famoso por sua propensão a falar coisas sem sentido com confiança, como fornecer estatísticas incorretas ou bagunçar cronogramas históricos.

Quando uma IA simplesmente inventa coisas que parecem plausíveis, isso é chamado de alucinação. É como quando você teve um teste na escola para o qual não estudou, então começou a escrever coisas aleatórias na esperança de que pelo menos parte fosse verdade.

Com toda a justiça, esses problemas melhoraram à medida que as pessoas usaram o GPT-3.5 e ele se tornou mais inteligente e experiente. Ainda assim, porém, você descobrirá que ele repete informações incorretas, especialmente se for um assunto de nicho. É particularmente propenso a confundir conceitos avançados de física, matemática ou programação de computadores.

GPT-4, porém, está ainda mais à frente. De acordo com um relatório técnico , o GPT-4 é cerca de 20% melhor do que o GPT-3.5 nesse aspecto. Naturalmente, isso não significa que você deva confiar cegamente em tudo o que o GPT-4 diz, pois às vezes ainda inventa as coisas. Se você for usá-lo para a escola , digamos, você pode querer verificar os fatos para ter certeza.

Ampliando a Janela de Contexto

Além de ser mais inteligente, o GPT-4 também tem uma “memória” melhor do que o GPT-3.5. Colocamos “memória” entre aspas porque ela realmente não se lembra das coisas, mas coloca dicas no contexto do que você perguntou antes. Isso é chamado de janela de contexto, então quão bem uma IA generativa pode usar informações de um prompt anterior em um novo.

GPT-3.5 não era muito bom nisso. Se você inserisse um prompt e, em seguida, inserisse um novo com base na saída obtida, normalmente funcionaria, mas apenas uma ou duas vezes. Mais do que algumas etapas do prompt original, o bot seria redefinido e você teria que inserir seus parâmetros novamente em seus prompts.

A janela de contexto do GPT-4 é muito maior, “lembrando” mais e por mais tempo. Quanto mais complicado você torna as coisas, pior fica para lembrar o que você perguntou antes, mas no geral, depois de brincar um pouco, temos que dizer que ele respondeu muito bem aos nossos prompts. Prevemos que economizará muito tempo para as pessoas que o usam intensivamente.

O que provavelmente também ajudará é que o GPT-4 pode lidar com muito mais entradas, até 3.000 palavras por prompt. Isso é perfeito se você deseja alimentá-lo com um texto de exemplo para trabalhar e funciona bem em conjunto com a janela de contexto ampliada.

Segurança

Finalmente, devido a todas as suas melhorias, o GPT-4 é muito mais “seguro” do que o GPT-3.5. Por mais seguro, queremos dizer que há muito menos chance de obter as chamadas respostas tóxicas, portanto, respostas que envolvem opiniões racistas ou sexistas desagradáveis. 

Os modelos de linguagem têm um desempenho muito ruim nesse quesito: em 2016, por exemplo, o chatbot Tay da Microsoft teve que ser colocado offline em poucas horas depois de aprender algumas coisas bem desagradáveis ​​pelos elementos menos salubres da internet. O plugue foi desligado depois que Tay começou a papaguear pontos de discussão da supremacia branca e jorrar bobagens sobre os ataques de 11 de setembro.

O GPT-3.5 foi uma grande melhoria a esse respeito, pois não regalaria seus usuários com slogans de extrema direita, mas ainda apresentaria algumas reivindicações que você não faria em sua mesa de jantar - pelo menos não de maneira educada empresa. Provavelmente, isso se deve à forma como o modelo de idioma foi treinado ao longo dos meses.

O OpenAI aparentemente ficou ainda melhor no treinamento, já que com o GPT-4 os resultados tóxicos foram reduzidos ainda mais, com apenas cerca de um por cento das respostas sendo classificadas como tóxicas. Isso deve tornar o GPT-4 um recurso mais confiável em geral.

Quando você deve usar GPT 3.5 vs GPT-4?

Embora o GPT-4 seja muito melhor em todos os aspectos, ele vem com dois gargalos: é mais lento e também tem um limite de quanto você pode usá-lo. Como resultado, provavelmente é melhor usá-lo apenas para os prompts de serviço pesado, aqueles que exigem muita entrada e, portanto, apresentam respostas diferenciadas.

Para todo o resto, o GPT-3.5 é provavelmente a melhor opção: as respostas são rápidas e, embora você precise verificar um pouco mais os fatos, é confiável o suficiente para a maioria das tarefas simples. No final, misturar e combinar ambas as versões provavelmente trará resultados surpreendentes com relativamente pouco esforço.