GPT-3.5 VS GPT-4: сравнение ботов с искусственным интеллектом

OpenAI недавно представила GPT-4, новую улучшенную версию чат-бота, которая покорила мир. Каковы же различия между GPT-4 и его предшественником GPT-3.5? Давайте сравним GPT-3.5 с GPT-4 и посмотрим, насколько он на самом деле умнее.

Практические отличия

Прежде чем мы перейдем к различиям в производительности, сначала давайте рассмотрим некоторые практические различия между ними. Во-первых, в то время как любой, у кого есть подключение к Интернету, может выйти в интернет и использовать GPT-3.5, только люди, выбравшие платный план OpenAI (называемый ChatGPT Plus), могут возиться с GPT-4. 

Платный план стоит 20 долларов в месяц (до налогообложения) и не только дает вам доступ к GPT-4, но и дает вам приоритет, если старая версия испытывает большую нагрузку. Это также ускоряет получение ответов с помощью GPT-3.5. Мы также имеем в виду намного быстрее : как только мы заплатили, казалось, что это уже не остановить!

Однако, даже если вы заплатите, вы не получите неограниченный доступ к GPT-4, как к GPT-3.5. Вместо этого вы можете задать ему только определенное количество подсказок. В настоящее время вы получаете 25 подсказок в течение трех часов, но, поскольку это ограничение постоянно меняется, может случиться так, что к тому времени, когда вы прочитаете это, эти ограничения исчезнут.

Также обратите внимание, что GPT-4 отвечает намного медленнее, чем GPT-3.5. Хотя это, вероятно, изменится в ближайшие месяцы, прямо сейчас боту требуется некоторое время, чтобы найти ответы, поэтому не ожидайте, что он сделает что-то слишком быстро.

GPT-4 умнее

Как и следовало ожидать от обновления, GPT-4 просто намного умнее, чем GPT-3.5. Под этим мы подразумеваем, что это более креативно и лучше понимает, чего вы хотите. Его языковая модель — переосмыслите ее как то, как мы общаемся и какие слова мы используем — всего лишь на световые годы впереди. Вы можете увидеть это, когда подадите ему подсказку, в которой есть какой-то нюанс.

Для этого примера мы выбрали относительно простую подсказку, вдохновленную этой веткой Reddit , прося ChatGPT «создать пример того, как выглядело бы короткое эссе о фотосинтезе, если бы его написал 10-летний ребенок. Включите ошибки, которые мог бы допустить писатель». Результаты дикие. Вот мнение GPT-3.5.

Это не так уж плохо, детское использование языка довольно убедительно, но здесь и там есть несколько поддач. Это было бы довольно умным 10-летним ребенком, написавшим такое. Теперь проверьте GPT-4:

Это совершенно другой котел: есть орфографические ошибки, некоторые проблемы с грамматикой, и в целом использование языка намного более убедительно. Хотя это и не идеально, на первый взгляд можно подумать, что это напишет ваш племянник.

Эти изменения отражаются в каждой подсказке, которую вы могли бы дать GPT-4: его использование языка просто лучше, и он намного лучше улавливает нюансы человеческой речи, включая вашу. Хотя вам по-прежнему нужно быть осторожным с фразами подсказок , вы можете ожидать гораздо лучшего результата с меньшими усилиями.

Лучшие факты

Помимо большей креативности, GPT-4 также заслуживает большего доверия, чем GPT-3.5. Когда он впервые появился, GPT прославился своей склонностью уверенно извергать полную тарабарщину, например, выдавать неверную статистику или искажать исторические временные рамки.

Когда ИИ просто выдумывает вещи, которые звучат правдоподобно, это называется галлюцинацией. Это как когда у вас был тест в школе, к которому вы не готовились, поэтому вы просто начали записывать случайные вещи в надежде, что хотя бы часть из них была правдой.

Честно говоря, эти проблемы стали лучше, когда люди начали использовать GPT-3.5, и он стал умнее и осведомленнее. Тем не менее, вы обнаружите, что он повторяет неверную информацию, особенно если это нишевая тема. Он особенно склонен искажать сложные понятия из физики, математики или компьютерного программирования.

Однако GPT-4 еще впереди. Согласно техническому отчету , GPT-4 работает примерно на 20 процентов лучше, чем GPT-3.5 в этом отношении. Естественно, это не означает, что вы должны слепо доверять всему, что говорит GPT-4, поскольку иногда он все равно выдумывает. Если вы собираетесь использовать его, скажем, в школе , вы можете проверить его, чтобы убедиться.

Расширение контекстного окна

Помимо того, что он умнее, GPT-4 также имеет лучшую «память», чем GPT-3.5. Мы берем «память» в кавычки, потому что она ничего не помнит, а помещает подсказки в контекст того, о чем вы ее спрашивали раньше. Это называется контекстным окном, поэтому насколько хорошо генеративный ИИ может использовать информацию из более ранней подсказки в новой.

GPT-3.5 не очень хорош в этом. Если вы ввели подсказку, а затем ввели новую на основе полученного вывода, она обычно работала, но только один или два раза. Через несколько шагов от исходной подсказки бот сбросится, и вам придется снова вводить свои параметры в подсказках.

Контекстное окно GPT-4 намного больше, «запоминает» больше и дольше. Чем сложнее вы что-то делаете, тем хуже становится вспоминать, что вы спрашивали раньше, но в целом, немного поигравшись, мы должны сказать, что он довольно хорошо реагировал на наши подсказки. Мы прогнозируем, что это сэкономит людям, которые интенсивно его используют, много времени.

Что, вероятно, также поможет, так это то, что GPT-4 может обрабатывать гораздо больше ввода, до 3000 слов на приглашение. Это идеально, если вы хотите передать ему пример текста для работы, и хорошо работает в сочетании с расширенным контекстным окном.

Безопасность

Наконец, из-за всех своих улучшений GPT-4 намного «безопаснее», чем GPT-3.5. Под более безопасным мы подразумеваем, что гораздо меньше шансов получить так называемые токсичные ответы, то есть ответы, содержащие неприятные расистские или сексистские мнения. 

В этом отношении языковые модели имеют довольно низкую производительность: например, в 2016 году чат-бота Microsoft Tay пришлось отключить всего за несколько часов после того, как менее полезные элементы Интернета научили его довольно неприятным вещам. Вилка была отключена после того, как Тэй начал повторять тезисы сторонников превосходства белой расы и нести чепуху о терактах 11 сентября.

GPT-3.5 был большим улучшением в этом отношении, поскольку он не угощал своих пользователей крайне правыми лозунгами, но все же выдвигал несколько утверждений, которые вы не стали бы поднимать за обеденным столом — по крайней мере, не в вежливой форме. компания. Вероятно, это связано с тем, как языковая модель обучалась в течение нескольких месяцев.

OpenAI, по-видимому, стал еще лучше в обучении, поскольку с GPT-4 токсичные результаты были снижены еще больше, и только около одного процента ответов были классифицированы как токсичные. Это должно сделать GPT-4 более надежным ресурсом в целом.

Когда следует использовать GPT 3.5 или GPT-4?

Хотя GPT-4 намного лучше во всех отношениях, у него есть два узких места: он медленнее, а также имеет ограничение на то, как долго вы можете его использовать. В результате вам, вероятно, лучше всего использовать его только для сложных подсказок, которые требуют большого количества входных данных и, следовательно, дают подробные ответы.

Во всем остальном GPT-3.5, вероятно, является лучшим вариантом: ответы приходят быстро, и хотя вам, возможно, придется немного больше проверять факты, он достаточно надежен для большинства простых задач. В конце концов, смешивание и сопоставление обеих версий, вероятно, даст вам потрясающие результаты при относительно небольших усилиях.