Почему большинство людей не пользуется нейросетями?

 Публичный пост
11 июня 2024  3124

Больше половины моих знакомых не пользуется ChatGPT. Быстро погуглив всякие опросы в интернете — статистика показывает примерно ту же картину. Как так то?

Типичный сценарий: человек пару раз попробовал нейронки на своих задачах, и получилось плохо. Делает вывод, что — это тупая хрень, перехайпленная, и пользы от них ноль.

Ben Evans круто объяснил, в чем проблема такой логики.

Когда что-то спрашиваешь у ИИ, он выдает, как выглядел бы хороший ответ на похожий вопрос. Иногда «похоже на хороший ответ» — это то, что нужно. А иногда «примерно правильно» — это «точно неправильно».

Если нейронка не справляется, это больше говорит о тебе, чем о ней. Ты дал джуну задачу, с которой он не справился. Кто виноват?

Виноват ты, потому что использовал инструмент для неподходящей задачи или плохо составил промпт. Нейронки сейчас как джуны в команде — от них нужно по-умолчанию ожидать кучу ошибок. Надо направлять и помогать учиться. Большая часть ответственности лежит на тебе.

Однако Ben накидывает еще: "не получится продвигать продукт, в котором простые юзеры вынуждены учить код для командной строки". Нужно двигаться навстречу пользователю. Нейронка должна уметь как сеньор специалист помочь понять и лучше сформулировать задачу. А возиться с джунами — отстой.

У Бюро Горбунова есть офигенный принцип: Исполнитель Понимает Задачу. Принцип перекладывает ответственность за результат на того, кто больше шарит в задаче — на исполнителя (в нашем случае на нейросеть). Теперь это его ответственность задавать вопросы и хорошо понимать, что на самом деле ты от него хочешь.

Юзер не обязан разбираться во всех тонкостях задачи и ему сложно качественно обьяснить суть. Иногда даже до такой степени, что проще сделать задачу самому, чем обьяснить другому. А исполнитель не телепат и может понять, какие именно тонкости важны, только поговорив с юзером.

Основное конкурентное преимущество провайдеров нейронок будет не в том, насколько круче сама модель, а в том, какая продуктовая инфраструктура выстроена вокруг неё. Нейронки уже сейчас плюс-минус одинаковые. А вот если кто то упростит процесс создания хорошего промпта, это будет сильный шаг вперед.

С новым голосовым интерфейсом, минимальной задержкой и возможностью перебивать друг друга это вполне возможно сделать.

Связанные посты
80 комментариев 👇
🕵️ Юзер скрыл свои комментарии от публичного просмотра...
  Развернуть 1 комментарий

@ZLmOCuHJgK3OijKD,

А расскажи почему?

  Развернуть 1 комментарий
  Развернуть 1 комментарий

@leeaao, как софтваре инженер отвечу:

Он не решает моих задач. Попытки писать код с помощью ИИ делают лютую херню в моей области. Попытки делать им тесты делают ЛЮТЕЙШУЮ херню.

На работе стоит ИИ ревьювер на мерж реквесты и 99% времени он несет бред без понимания контекста.

Так что на работе он мне даже мешает. Возможно я использую его в телефоне, когда ищу что-то по фотографиям, но редко. Вот и все.

  Развернуть 1 комментарий
🕵️ Юзер скрыл свои комментарии от публичного просмотра...

@leeaao, прошло больше года, считаю, что я обязан написать апдейт.

Я начал пользоваться нейросетями, конкретно - chatgpt.

Я прошу его писать мне регулярные выражения и прошу объяснить некоторые конструкции в коде, которые мне не понятны. С первым справляется ок, со вторым пока ему трудно.

  Развернуть 1 комментарий
Egor Suvorov Программист/преподаватель C++ 11 июня 2024

Ты дал джуну задачу, с которой он не справился.

Так я и не хочу давать джунам задачи. Я специально для этого работаю как individual contributor, а не как менеджер.

  Развернуть 1 комментарий

Если нейронка не справляется, это больше говорит о тебе, чем о ней. Ты дал джуну задачу, с которой он не справился. Кто виноват? Виноват ты.

Нет, просто нейронки полное говно в данный момент.

На данный момент более-менее общепринятое мнение, что конкретно в кодинге нейронки типа копилота годны только для бойлерплейта - т.е. написать то, что и я так смог написать бы, просто одной кнопкой вместо нескольких. На любые более-менее сложные задачи он начинает генерить настолько лютую чушь, что проще его вообще не слушать. А бойлерплейт умеет генерить как любая вменяемая IDE, так и ctrl+c - ctrl+v, да и со скоростью печати особо проблем нет.

  Развернуть 1 комментарий

@Gregpack, но говном можно топить печь! Говорю как житель Армении.

  Развернуть 1 комментарий

@leeaao, срать в код для растопки я справлюсь лучше любой нейросети!

  Развернуть 1 комментарий

@Gregpack, проорал в голос >_<

  Развернуть 1 комментарий

@Gregpack,

А бойлерплейт умеет генерить как любая вменяемая IDE

Ну кстати бойлерплейт от нейронок мне показывали гораздо круче, чем от IDE, и даже чем можно сделать регулярками. Например, ты сначала делаешь рефакторинг одного места в стиле "вот этот вызов функции заменить на такой-то иф и промежуточную переменную", а дальше по хоткею нейронка делает то же самое в куче мест с учётом местного синтаксиса и названий переменных. Скобки там лишние (или нелишние), вот это всё. В регулярке это задолбаешься формализовывать, а structural search & replace есть только в IntelliJ IDEA, работает кривовато и там нужно знать очень специальный синтаксис.

Разумеется, надо перепроверить результат, но всё равно сильно быстрее, чем руками.

  Развернуть 1 комментарий

@yeputons, проблема в том, что сгенерить бойлерплейт сложнее чем "вот щас сюда мне функцию на 5 строк подставь" надо, как ты сам и сказал, перепроверять. А то что выдает нейронка - не верифицируется никак, кроме "тупо посмотреть глазами", в отличие от реплейса через идею, где если в одном месте норм, то и везде норм.
Буквально на прошлой неделе я выдал копайлоту на вход табличку, из которой надо было вытащить первую колонку, перечислить через запятую и подставить в пару джавовских конструкторов. Он это сделал, я обрадовался, а на тестах выяснилось что пару значений он продублировал, а пару значений просто по пути потерял. Проверять такие вещи лично для меня настолько муторно, что мне проще и энергоэффективнее покопипастить самому в будущем. Тем более, если там реплейс на десяток файлов - я гарантированно не замечу ошибку глазами.

  Развернуть 1 комментарий
🕵️ Юзер скрыл свои комментарии от публичного просмотра...

@Gregpack, не, понятно, что если там надо сгенерировать хитросплетений на три сотни строк, то тоска-уныние.

Я скорее про штуки, которые писать муторно, а проверять просто. Мне показывали на другом примере, но у меня недавно была такая задача: "добавить во все ~50 вызовов этого метода последний аргумент, который по умолчанию равен xxx, где переменная с именем ровно xxx уже есть в 95% случаев, а остальные случаи разберу руками". По дороге проигнорировать комментарии и правильно учесть случаи, когда там вложенные скобки внутри, переносы строк, и прочая балалайка.

Регулярками это не делается, а рефакторинг вроде как не умеет. Кажется, тут нейронка бы справилась очень хорошо.

  Развернуть 1 комментарий

@yeputons, рефакторинг в идее умеет добавлять параметр в нужную позицию со значением по умолчанию.

  Развернуть 1 комментарий

Почти все мои задачи требуют технически верного решения. Я не могу верить GPT и не проверять результат досконально. А пока проверяешь мог бы и сам уже сделать.

Ни разу еще я не смог найти им применения, которое бы сэкономило мне силы и/или время.

  Развернуть 1 комментарий
🕵️ Юзер скрыл свои комментарии от публичного просмотра...
Holovin FE Software engineer 11 июня 2024

4o против скриншота
4o против скриншота

Есть хорошая демонстрация почему. Это не джун, это очень специальный молоток для специальных гвоздей, но почему-то продвигается как «супер-решение-для-всего-вообще-на-свете».

  Развернуть 1 комментарий

@holovin, ты бы картинку тоже показал, а то мб там шакальное месиво.

  Развернуть 1 комментарий

@IgorAlentev, ну если скриншот 1080 с ютуба это месиво

  Развернуть 1 комментарий

@IgorAlentev,

Вот, держи ещё пример, одна и та же актриса из одного и того же трейлера, imdb говорит что это Naomi Scott

А вот Наташа, про которую сгалюцинировал gpt (оч похоже да?)

  Развернуть 1 комментарий

@holovin, мде ну тут целая серия причин и непонимания базы.

  1. Фильм 2024 года, нейронка не знает о его существовании. Даже у новой 4о контекст 23 года.

  2. Не самая известная актриса, её фотографии скорее всего просто не попали в обучающую выборку.

  3. На первом скрине актриса действительно чем то напоминает Эмили, так что ответ нейронки понятен, хоть и неправилен. В моём случае на тот же кадр 4о предположила что это Хлоя Морец, и она тоже похожа на этом кадре.

Вот мой пример.

  Развернуть 1 комментарий

@IgorAlentev, вы просто неправильно держите айфон

  Развернуть 1 комментарий

@holovin, рад что открыл глаза на реальность.

  Развернуть 1 комментарий

- Почему большинство людей не пользуется нейросетями?
- Потому что они тупые.

Верно как для людей, так и для нейросетей, но пока что чаще для последних.

  Развернуть 1 комментарий

Если нейронка не справляется, это больше говорит о тебе, чем о ней. Ты дал джуну задачу, с которой он не справился. Кто виноват?

тяжелый_вздох.wav

Может, я просто работаю над задачами, с которыми нейронка не справляется в принципе? Или, может, я могу просто-напросто сделать быстрее нейронки?

В моем случае пользование ChatGPT меня замедляет - мне не нужны summary, мне не нужно писать однообразный код день за днем, в документации разного сорта я прекрасно научился ориентироваться, гуглю без проблем...для чего мне тогда нужен ChatGPT?
Просто чтобы сказать, что я модный и иду в ногу со временем?

Еще очень много вижу комментариев и мнений в духе "ну, просто надо найти, как именно тебе поможет, покрутить, как ее можно прикрутить к твоему текущему процессу". Всегда забавно читать, вспоминая, как в сфере Андроид и фронтенд-разработки регулярно происходит процесс поиска проблемы, под которую подошло бы новое, прекрасное и сияющее решение.

  Развернуть 1 комментарий
🕵️ Юзер скрыл свои комментарии от публичного просмотра...

Почему большинство людей не использует Excel (GoogleSheet) ?

  Развернуть 1 комментарий
🕵️ Юзер скрыл свои комментарии от публичного просмотра...

@gramlin, потому что это не general purpose инструмент. А нейронкой можно и работу инженера работать и рецепт для торта собирать.

  Развернуть 1 комментарий

@leeaao, вот вот. LLM тоже совсем не general purpose инструмент для большинства задач. Более того, как выше отметили пока существуют гораздо более простые способы даже для тех задач с которыми LLM справится, например рецепт торта проще и, главное, надёжнее нагуглить с реальными отзывами.

на мой взгляд, потенциал использования LLM даже когда их доведут до ума будет как раз между пакетом MS Office и Гуглом.

  Развернуть 1 комментарий

@leeaao, и рецепт пиццы у gemini узнать

  Развернуть 1 комментарий
Anna Программист 11 июня 2024

Потому что практически каждый раз, когда я вижу результат работы AI, мне плакать хочется. Нет большей антирекламы, чем та, которую GPT делают сами себе.

  Развернуть 1 комментарий

@Doredel, эээ ну кажется пост как раз это и раскрывает. Не согласна?

  Развернуть 1 комментарий

@leeaao, так в посте написано, что если хочется плакать - пользователь сам виноват. Вот я и не хочу быть виноватой. Не нужно мне работу добавлять, мне ее хватает.

  Развернуть 1 комментарий
🕵️ Юзер скрыл свои комментарии от публичного просмотра...

А зачем?

Получить информацию - быстрее на автомате нагуглить и на автомате же выделить нужное в фокус. Плюс поисковой запрос работает для меня консистентно и ожидаемо. Ответ gpt же придется ментально чистить от воды, формат диалога для этой задачи усложняет, а не упрощает восприятие.

Объяснить непонятное - в целом то же самое, в добавок пока что с этим другой человек в живую или на записи справляется лучше.

Нагенерить формальной воды вокруг сути, например для email'ового бюрократического этикета - в результате очевидно, что сеть писала, что даже хуже чем без него вообще.

Код писать - архитектурные задачи не решает, а нагенерить класс с конструктором - даже не знаю, куда буду сэкономленные 10 секунд тратить. (К слову copilot пробовал, но в посте речь о gpt и промптах)

  Развернуть 1 комментарий

Щас попридираюсь немножко к словам, а потом напишу развёрнуто:

Типичный сценарий: человек пару раз попробовал нейронки на своих задачах, и получилось плохо. Делает вывод, что — это тупая хрень, перехайпленная, и пользы от них ноль.

А потому что надо было пробовать на чужих задачах, в которых самостоятельно-то разобраться сложно, а уж оценить чужой результат и подавно.

Некоторые люди относятся к языковым моделям как к собеседникам, которые сидят где-то по другую сторону монитора и действуют как люди со всеми ответственностями и ответными взаимодействиями.

Но GPT и подобные модели не действуют как нормальные и адекватные люди. Они просто генерируют правдоподобный текст.

Например, если попросить ChatGPT 4o помочь с проблемой вида «не включается компьютер», он сразу начнёт накидывать идеи, что надо проверить: кабель питание, исправность кнопки, блок питания... В то же время, человек задаст несколько уточняющих вопросов, поскольку формулировка «не включается» у разных людей может означать от «нет реакции от системного блока» до «системник гудит, но нет картинки на мониторе», «ОС крашится с ошибкой», «форма входа принимает пин-код в качестве пароля» и даже «не запускается браузер».

Причём, мне GPT ещё посоветовал потыкать мультиметром в блок питания. Ему ведь ничего не будет, если я полезу разбирать БП под напряжением и нагрузкой и задену рукой ввод 220В. А если мне такое посоветует друг, есть риск, что другом после этого он перестанет быть.

Если модель, обученная на куче советов с форумов, даже тут не может адекватно ответить, как я могу от неё ожидать решения более сложных вопросов, специфичных для узкой сферы деятельности? Мне всё равно придётся перепроверять за ней и править её косяки, и это зачастую может занять куда больше времени, чем написание такого кода самостоятельно. Ценой ошибки при написании какого-то большого куска кода может быть пара часов моего времени.

В общем, GPT — это прикольный советчик, а если смотреть в терминологии «дал джуну задачу» скорее чувак из соседнего отдела (шарящий во всём по чуть-чуть), который может накидать разных неожиданных идей, одну из которых я выберу под свою ответственность. И в таком образе у него действительно не так уж и много кейсов для использования.

  Развернуть 1 комментарий
Pannikinjuli YouTuber, создаю религию 11 июня 2024

Не все люди даже поисковиком пользоваться* приучились, а тут новая штука, к которой надо:

  1. привыкнуть (нужно время)
  2. подобрать юз кейсы (нужно думать)

Итого – лень.

Хотя в моём окружении друзей и коллег нет ни одного человека, который бы вообще нейросетями не пользовался. И я не только про ChatGPT, но и text to image, генерацию музыки.

Вообще не представляю, как теперь письма без чатаджпт писать, особенно в стиле «пошли их нахер профессионально», «напиши в стиле скандальной тётки». И картинки. Зачем искать референс, если можно сгенерировать.

*Ввести что-то в поисковую строку ещё не значит уметь пользоваться

  Развернуть 1 комментарий

@pannikinjuli, кстати, да, поддерживаю. Поиском я в какой-то момент как-то научился пользоваться и мне очень помогает, но как я это делаю — хз. Как остальные этого не делают — страдают, как мне кажется.

  Развернуть 1 комментарий

Скорее все пользуются результатом работы машинного обучения особо не задумываясь:

  • ранжирование поиска в гугле/яндексе
  • рекомендации почти везде: ютуб, музыкальные сервисы, маркет-плейсы
  • онлайн-перевод: давно уже на нейронках
  • фильтры/эффекты в соц сетях: тик-ток, инста
  • расшифровка аудио-сообщений в мессенджерах
  • автоматические субтитры в видео-сервисах
  • распознавание людей, предметов на фото (привет icloud и google photos)

Список можно долго продолжать. Думаю, что как раз самый кайф, когда продукт изменяется, а мы как пользователи не обязаны знать, что там работает под капотом.

  Развернуть 1 комментарий

Слишком много ошибок, на него нельзя положиться практически ни в чем серьезном.
В большинстве задач у меня должно быть знание в голове итогового результата, хотя бы приблизительное, потому что он мне наврет с три короба в любом случае, и мне нужно отделить, где он пишет правду от того, где он врет, уточнить и перепроверить.

  Развернуть 1 комментарий

@Zefir, Ну и как я понимаю, проще самому написать.

  Развернуть 1 комментарий
🕵️ Юзер скрыл свои комментарии от публичного просмотра...
🕵️ Юзер скрыл свои комментарии от публичного просмотра...
Semen Starostin Системный архитектор 23 июня 2024

Народ пользуется , но приводит это к не тем результатам которые ожидаются что меня немного смешит, например в соседнем треде люди обсуждают как джуны и не джуны генерят с помощью чат жпт резюме , а потом удивляются почему hr их массово отклоняют не читая :)

Когда у меня возникает какая то не тривиальная проблема с кодом я иду на stackoverflow , читаю самый заплюсованный коммент по проблеме а дальше отматываю в низ по треду и еще менее заплюсованные, почти всегда я нахожу более красивое и более свежее решение с небольшим кол-во плюсов.

Тем не менее я начал использовать gpt для быстрого перевода технической литературы и вот тут он мне зашел.

  Развернуть 1 комментарий

@SAXER, хрюши массово их отклоняют не читая, потому что они никакие резюме не читают. ATS, поиск ключевых слов, поиск ключевых по выжимке chatGPT. Когда через их говнофильтры прошли какие-то резюме, будут читать лиды команд, куда найм идёт, может быть. Это элементарно вскрывается на втором звонке по тому, что за вопросы тебе задают.

  Развернуть 1 комментарий

@mighty_conrad, ну окай , суть то одна прогнали резюме через чат gpt он дал выжимку которую отклонили по фильтрам , теперь недостаточно просто написать резюме видимо нужно еще написать его так что бы gpt из него правильно выжимку сделал

  Развернуть 1 комментарий

Я сейчас много говорю и работаю с людьми, которые пробуют внедрить GPT на бытовом и рабочем уровне. Основные возражения, с которыми работаю:

  • Основной реальный барьер - нужны усилия чтобы подобрать юзкейсы под себя, это большое изменение. А это изменения - сложно. Люди вообще склонны работать так, как привыкли.
  • Чтобы нормально взаимодействовать с GPT, нужно: пройти пару курсов по промптингу, прочитать все сборники "лушчих промптом для маркетолого", а лучше выучить их, подготовиться морально и физически и столкнуться с тем, что "chatgpt is not available in your region". Короче, все думаю что сложно.
  • Джуны внедряют это у себя охотнее, потому что хотят опередить старших. Старшие внедряют неохотно, потому что "ну можно же делегировать на джуна, который этим всем пользуется"))
  • Тоже весомый пункт, который не озвучивают: всё меняется очень быстро и люди не успевают. Ну буквально большинство людей думают, что gpt нужно сильно запромптить и 3.5 совсем тупой, а для pdf и изображений нужны отдельные нейросети. Хотя это уже давно не так (полгода? 3 месяца?)
  Развернуть 1 комментарий

@skitnik,

Я сейчас много говорю и работаю с людьми, которые пробуют внедрить GPT на бытовом и рабочем уровне.

А можешь про какой нибудь кейс прикольный рассказать?
Кмк подбор юзкейсов даже судя по комментам тут это самая серьезная сложность.

  Развернуть 1 комментарий

@leeaao, а вот кажется, что единичные кейсы уже не работают и воспринимаются скорее как спам (в духе "100 промптов которые нужно попробовать до 30 лет").

Хорошо работает создание общего инфопотока про GPT: подписать человека на несколько каналов, чтобы руководитель рассказывал о кейсах, чтобы в компании делились кейсами и проч.

У меня много кейсов - я их пишу в телеграм-канал и на прочие площадки, но это скорее как одна из частей популяризации. А кейсы у меня от странных (составить индивидуальный курс в GPTs по изучению блэк-метал сцены) до ежедневных (ретроспектива месяца с GPT/порефлексировать перед психологом).

  Развернуть 1 комментарий
🕵️ Юзер скрыл свои комментарии от публичного просмотра...
🕵️ Юзер скрыл свои комментарии от публичного просмотра...

А я вижу что пользуются, причём очень интересно. Джун копирует два класса и отправляет chatgpt так он исправляет багу в задаче которая была на нем. У него даже не возникло мысли что он нарушает контракт, в котором обычно указано что нельзя расшаривать код. И это в одном из банков.

  Развернуть 1 комментарий

@lham, хм, а где система безопасности банка?

  Развернуть 1 комментарий

@tdurova, похоже тоже в chatgpt)

  Развернуть 1 комментарий

@lham, так вот зачем у нас в нулевые на рабочих компьютерах не было интернета)
(компания занималась разработкой банковского софта)

  Развернуть 1 комментарий
🕵️ Юзер скрыл свои комментарии от публичного просмотра...

@lham, при этом если тот же самый джун скопировал код со стэковерфлоу В банк, то эт типа норм :-)

  Развернуть 1 комментарий

Интересно. Будучи сотрудником компании, которая использует, хостит и понемногу учится разрабатывать генеративные технологии, я, естественно, пользуюсь LLMками, но, скажем, ChatGPT мне не заменил поиск, и я вообще достаточно консервативно не хочу терять навык беглого гуглежа. Модельки могут делать крутые задачи, на которые неспособен поиск – суммаризация, перевод, помощь в поиске ключевых слов по описанию, но именно поиск я очень хочу оставить системам, основанным на индексе ссылок.

  Развернуть 1 комментарий
🕵️ Юзер скрыл свои комментарии от публичного просмотра...

😱 Комментарий удален его автором...

  Развернуть 1 комментарий

😱 Комментарий удален его автором...

  Развернуть 1 комментарий

Я в своих целях использую CoPilot в VS Studio code как умный autocomplete и иногда chatGPT/Gemini чтобы что-то спросить или попросить написать скрипт какой-то. Обычно скрипт подходит как первая нерабочая итереция, которую потом надо доработать напильником.

Ещё крайне полезная фича при написании научных статей - написать в краткой форме свои мысли, и попросить chatGPT переписать в читабельном варианте, а потом поправить те места где он наложал.
Но есть нюанс, научные журналы уже обожглись на том что люди теперь пишут достоверно-выглядящую туфту, сгенерированную chatGPT и начали писать гайды о том как это использовать. Основной месседж - три раза проверь чего там тебе ChatGPT написал, потому что по шапке (paper retraction) прилетит тебе, а не ему.

У нас на работе (в университете) корпоративная подписка на MS CoPilot. Недавно универистеские шишки организовали целую учебную лекцию на тему что это такое и как это использовать. У универсистеских слушателей сразу возник вопрос, на который организаторы не смогли внятно ответить - кому принадлежит копирайт у сгенерённого текста/изображений и не придётся ли это потом все нафиг похерить, когда выяснится что chatGPT незаконно натренеровали на контенте без согласия оригинальных авторов и вообще получится плагиат.

Ещё один узе-кейс, один знакомый сказал что использует ChatGPT чтобы писать свои статьи , а потом их руками переписывает, пока https://gptzero.me/ не показывает что текст написан хумансом, а не машиной.

  Развернуть 1 комментарий

@vfonov, я слышал, что в США копирайта на сгенерированные штуки нет. В смысле "круче чем public domain" — кто угодно можно делать что угодно с результатом, "автора" и "авторского права" нет.

  Развернуть 1 комментарий

@yeputons, то что он пишет не защищено копирайтом. А если он повторит то что написано другими - то оно будет защищено их копирайтом. Вот New York Times показало что он может генерить их статьи с небольшими изменениями.

Ну и я не в США.

  Развернуть 1 комментарий

😎

Автор поста открыл его для большого интернета, но комментирование и движухи доступны только участникам Клуба

Что вообще здесь происходит?


Войти  или  Вступить в Клуб