Это сайт — моя персональная записная книжка. Интересна мне, по большей части, история, своя жизнь и немного программирование.

ChatGPT-4 vs. Chat X-Colleagues

Раз у меня нарисовалась задача, где я довольно мелко плаваю, было бы логично протестировать на нём возможности ChatGPT-4, тем более часто говорят о том, что он насколько хорош, что программисты уже не нужны.

Я сегодня уже рассказывал о своём опыте в Си и Си++. Результаты там, можно прямо сказать, не ошеломляющие, но на этом экспериментировать я не бросил. У меня родилась ещё одна идея.

У программ на Си и Си++ часто есть так называемый «сборочный файл», это инструкции на специальном языке, описывающие последовательность компиляции сложных программ.

Получившийся в результате эксперимента Makefile

В проекте «Гопника-2» такой файл тоже есть — тот, который достался мне в наследство от автора оригинальной игры. Я его сильно упростил, — несмотря на то, что я их не частно пишу, всё же принципы понимаю очень хорошо.

Хорошо, но недостаточно, чтобы дописать секцию mingw, где у меня бы переопределялись флаги компилятора и его название. С задачей я справился, но решение мне не нравилось.

В итоге, я провёл следующий эксперимент: открыл два чата: бывших коллег (несмотря на то, что я уже одиннадцать лет не работаю в «Яндексе», мы достаточно интенсивно общаемся) и ChatGPT-4, и в них, в режиме вопрос-ответ попробовал улучшить своё решение.

Люди выиграли с огромным перевесом: нейросеть уносила иногда в неведомые дали, она видела ошибки там, где их нет и не замечала мест с явно неправильно написанными кодом. В итоге, мне удалось наводящими вопросами вывести её на правильное решение, но хорошим результатом это не назвать.

Вывод такой: программистов когда-нибудь заменят, но не на ChatGPT-4.

2 комментария
Erik 2023

Нет никакого ChatGPT-4. Есть ChatGPT и есть GPT-4. Доступ за GPT-4 надо отдельно просить:
https://help.openai.com/en/articles/7102672-how-can-i-access-gpt-4

Я подозревю, что PRO подписки не было, поэтому в ChatGPT скорее всего был GPT-3.5, который ну сильно отличается от GPT-4. Если нужно чуть пополнить знания в этой области, то рекомендую эту статью, чтобы понять на сколько разница огромная:
https://habr.com/ru/post/723660/

Если уж хочется увидеть плюсы от нейронок, то я бы уже тогда посмотрел в сторону Copilot, который дает невероятно крутой буст разработчикам и уже активно используется как ассистент.

Евгений Степанищев 2023

Я подозревю, что PRO подписки не было, поэтому в ChatGPT скорее всего был GPT-3.5, который ну сильно отличается от GPT-4

Я общаюсь через чат-бота моих приятелей, которые собираются как-то монетизировать про-подписку в России через «телеграм». У них есть доступ к АПИ с ГПТ-4. С моей точки зрения, это вполне ChatGPT-4.

Если уж хочется увидеть плюсы от нейронок, то я бы уже тогда посмотрел в сторону Copilot, который дает невероятно крутой буст разработчикам и уже активно используется как ассистент.

С копилотом я что-то уже наигрался, спасибо. Он выглядит для меня менее продвинутым, чем модель GPT.

Leonid 2023

И всё равно ChatGPT это невероятно круто. Не помню чтобы что-то другое производило в последнее время производило не тольой такой вау-эффект, но и реально приносило пользу.

Евгений Степанищев 2023

Что круто, я и не спорю, это действительно какой-то следующий уровень, полный восторг. Но чего-то сетка не умеет и тут я хочу навести порядок в головах.

Не у всех есть возможность с ней пообщаться, может кому-то будет интересно посмотреть не только на позитивный опыт — им весь интернет завален, но и на негативный тоже.