Джошуа Барретто по-прежнему не использует LLM ни для чего, что ему действительно важно. Причин много: экология, общество, политика, зависимость от экосистем, философия, а также сознательный демонтаж переговорной силы труда. Но главная для него — простой вопрос эффективности: непонятно, работают ли эти модели вообще для создания нетривиального софта.
Прошло четыре года «революции», а индустрии почти нечего показать. Программы не стали качественнее, быстрее, дешевле или безопаснее. Старые империи не пали, новых идей не появилось — только бесконечные разговоры самих ИИ-энтузиастов. Все кричат, но никто ничего полезного не выпускает.
Барретто не чувствует, что отстаёт, хотя ожидал обратного. Никто не «увёл репутацию» у его open-source-проектов. Функциональность кода можно скопировать, но даже memcpy показывает: проект, которому люди доверяют как основе своих систем, — это больше, чем список фич.
Доказательства продуктивности — тонкие. Потрачено 1,5 триллиона долларов, а независимых исследований, подтверждающих рост производительности, почти нет. Те, что существуют, либо меряют не то («строк кода», «PR-ов», «фич»), либо слишком малы. Даже серьёзные работы показывают лишь маргинальный или отрицательный эффект.
PR-ы, сгенерированные LLM, которые приходят в его проекты, всё ещё мусорные. Код стал менее повторяющимся и стилистически более ровным, но не более пригодным. Доля мержей ниже, чем у людей. Да, отличить сгенерированное от человеческого всё сложнее, но до «ботов среди нас» далеко.
Модели пропускают очевидное. Его библиотеки используют в FAANG, и до него доходят отчёты от сканирования frontier-моделями. Хорошего мало, плохого много. Несколько раз модель пропускала важное, а хобби-разработчик находил это своим мозгом за пару дней.
Философия ИИ-бустеров противоречит полувековой теории о том, что код — это вход в разработку, а не выход. Если мерять продуктивность строками кода, получишь не поддерживаемый никем «слоп», неважно, из машины он или от людей. Питер Наур остаётся непобеждённым.
Большая цель больших техкомпаний — гомогенизировать интеллектуальный труд, сделать его взаимозаменяемым. Тогда работников можно менять как угодно, а их переговорная сила падает. Разработка — одна из последних «цеховых» профессий, и сейчас её индустриализируют. Барретто сознательно не использует LLM, чтобы сохранить специализацию, и пока это работает: он спокоен за свою работу.