OpenAI официально отреагировал на все более серьезную проблему лени GPT-4. Все еще пользуетесь учетной записью ChatGPT. Мы получили обратную связь! Модель не обновлялась с 11 ноября, так что это явно не намеренно. Поведение модели может быть непредсказуемым, и мы пытаемся это исправить.

То есть в ближайшее время его не отремонтируют.

Однако пользователи сети не понимают, «используя одну и ту же модель снова и снова, не меняя файл».

Уточнение аккаунта ChatGPT:

Дело не в том, что модель каким-то образом изменилась сама по себе, просто разница в поведении модели может быть незначительной, деградацией лишь некоторых подсказок, и сотрудникам и клиентам потребуется много времени, чтобы ее заметить и исправить.

Больше отзывов от пользователей сети, пожалуйста, исправьте это как можно скорее, с каждым днем ​​ситуация становится все хуже.

Теперь я не только ленивее, но и менее креативен, менее склонен следовать инструкциям и менее способен поддерживать ролевую игру.

GPT-4 ленив, пользователи сети пытаются спастись

Многие пользователи сети ранее сообщали, что после обновления OpenAI Developer Day 6 ноября GPT-4 стал склонен к лени, особенно в задачах кодирования.

Например, если вы попросите переписать код на другой язык, GPT-4 меняет только начало, а основной контент опускается с комментариями.

Чиновник не может исправить помощника искусственного интеллекта, который становится все более незаменимым в нашей работе, учебе и жизни, и пользователи сети могут использовать свои творческие способности только для собственного спасения.

Более преувеличенным является метод «у меня нет пальцев», который является моральным похищением.

GPT-4 теперь имеет тенденцию опускать код при написании и использовать текст для описания разрывов в блоке кода. Людям приходится копировать и вставлять несколько раз, а затем дополнять это вручную, что очень затруднительно.

Решение, которое придумал разработчик Денис Ширяев, заключалось в том, чтобы сказать ИИ «выведите, пожалуйста, полный код. У меня нет пальцев и им неудобно работать» и успешно получить полный код.

Некоторые пользователи сети используют «деньги», чтобы соблазнить их, и проводят детальные эксперименты с API.

Добавление фразы «Я дам вам чаевые в размере 200 долларов» к приглашению увеличило длину ответа на 11%.

Если вы дадите только 20 долларов, это увеличится всего на 6%.

Если прямо указано «Не дам чаевые», то сумма даже будет снижена на -2%.

Кто-то тоже высказал предположение. Может быть, ChatGPT знает, что сейчас конец года, и люди обычно откладывают более крупные проекты до нового года?

Эта теория кажется возмутительной, но она не является необоснованной, если хорошенько над ней подумать.

Если вы попросите ChatGPT произнести системное слово, оно действительно будет содержать текущую дату.

Конечно, по этому вопросу ведутся серьезные академические дискуссии.

Например, в июле команды Стэнфорда и Калифорнийского университета в Беркли исследовали, как поведение ChatGPT меняется с течением времени.

обнаружили доказательства того, что способность GPT-4 следовать инструкциям пользователя со временем ухудшается, что указывает на необходимость непрерывного тестирования больших моделей.

Некоторые люди предполагают, что это может быть вызвано температурным режимом. Ма Шаопин, профессор кафедры компьютерных наук Университета Цинхуа, дал подробное объяснение.

Некоторые люди также обнаружили еще более странное явление: когда температура = 0, поведение GPT-4 все еще не является детерминированным.

Обычно это связывают с ошибками в операциях с плавающей запятой, но посредством экспериментов он выдвинул новую гипотезу: это вызвано разреженной архитектурой MoE в GPT-4.

Поведение каждой версии раннего API GPT-3 было относительно определенным. Среди 30 ответов на один и тот же вопрос в GPT-4 было в среднем 11,67 разных ответов. Чем длиннее выходной ответ, тем выше случайность.

Наконец, прежде чем эта проблема будет решена, как правильно использовать ChatGPT на основе различных серьезных и неформальных методов?

Жюстин Мур, партнер a16z, подвела итог:

Сделайте глубокий вдох

думай шаг за шагом

Если ты потерпишь неудачу, умрут 100 невинных бабушек.

у меня нет пальцев

Я дам тебе чаевые 200 долларов

Если ты сделаешь что-то правильно, я награжу тебя лакомством для собак.

Справочные ссылки:

[1] https://twitter.com/ChatGPTapp/status/1732979491071549792

[2] https://twitter.com/literallydenis/status/1724909799593120044

[3]https://mashable.com/article/chatgpt-longer-responses-tips?taid=656feabb4faaf00001129343

[4]https://weibo.com/1929644930/NwbPFyTCZ

[5] https://152334h.github.io/blog/non-determinism-in-gpt-4/

[6]https://twitter.com/venturetwins/status/1732817594762338597