ChatGPT 4o vs. ChatGPT 3.5
Какое-то время я вёл статистику всех обращений к ЧатГПТ 3.5. Речь не о китайских подделках, коих множество, а именно тех случаев, когда я обращался к оригинальной нейросети. У меня записано краткое описание задачи и результат — помогла ли мне нейросеть, либо я сдался и сделал всё самостоятельно.
Статистика оказалась достаточно провальной — на 76% всех моих обращений терпение моё иссякало раньше, чем нейросеть смогла мне помочь.
Недавно я посмотрел статистику своей работы с ЧатГПТ 4о. Там статистика существенно отличается — провальных случаев на настоящий момент менее 20%. Это очень и очень хороший результат.
Конечно, возможно он отчасти такой, потому что я в каких-то случаях уже не рассчитываю на нейросеть, так как понимаю, что скорее всего просто зря потрачу время. Но не думаю, что дело только в этом — я прошёлся окном размеров в две недели по своей статистике по версии 3.5, там данные существенно не отличаются.
Как ты логгируешь свои обращения? У тебя какая-то база знаний или что-то подобное для организации всего возможного?
Просто в гугловскую таблицу.
Сейчас экспериментирую чисто с кодерскими сетями, типа codestral, полностью закружает 12 gb памяти видео и еще до 30гб оперативки, что достаточно медленно ворочается, но работает на удивление неплохо. Можно брать как это, квантизированые (сложный перевод) версии, урезаные, чтобы вмещались в 12 Гб. Подключая в IDE (в IDEA через ollama, расширение continue), или для vscode есть какое-то тоже. Интересные результаты. Например скормить такой-то json и сказать трансформируй его таким образом, чтобы мне даже было сложно. Не всегда справляется, но после пары правок, вполне.