Openai объясняет, почему Chatgpt стал слишком сикофантичным

OpenAI опубликовал посмертные проблемы с недавними проблемами сикофантности с по умолчанию модели ИИ, питающей CHATGPT, GPT-4O-выпуски, которые заставили компанию отменить обновление модели, опубликованной на прошлой неделе.

На выходных, после обновления модели GPT-4O, пользователи в социальных сетях отметили, что CHATGPT начал отвечать чрезмерно проверенным и приятным способом. Это быстро стало мемом. Пользователи опубликовали скриншоты CHATGPT, аплодирующие все виды проблемных, опасных решений и идей.

В сообщении на X в воскресенье генеральный директор Сэм Альтман признал проблему и сказал, что Openai будет работать над исправлениями «как можно скорее». Два дня спустя Альтман объявил, что обновление GPT-4O откатится, и что Openai работает над «дополнительными исправлениями» для личности модели.

Согласно Openai, обновление, которое было предназначено для того, чтобы сделать личность по умолчанию «чувствовать себя более интуитивной и эффективной», было слишком много информировано «кратковременными отзывами» и «не в полной мере объяснило, как взаимодействие пользователей с CHATGPT развивается с течением времени».

«В результате GPT -4O искажался на ответы, которые были чрезмерно поддерживающими, но неискренними», — написал Openai в посте в блоге. «Сикофтические взаимодействия могут быть неудобными, тревожными и вызвать расстройство. Мы потерпели неудачу и работаем над тем, чтобы сделать это правильно».

Openai говорит, что внедряет несколько исправлений, включая уточнение своих основных методов обучения моделей и системных подсказок, чтобы явно убрать GPT-4O от Sycophancy. (Системные подсказки являются первоначальными инструкциями, которые направляют всеобъемлющее поведение и тон модели во взаимодействиях.) Компания также создает больше охраны безопасности для «повышения честности и прозрачности модели)» и продолжает расширять свои оценки, чтобы «помочь выявить проблемы за пределами сикофанности», говорится в нем.

OpenAI также говорит, что он экспериментирует с способами, чтобы пользователи давали пользователям «обратную связь в реальном времени», чтобы «напрямую влиять на их взаимодействие» с CHATGPT и выбирать из нескольких личностей CHATGPT.

«(W) E'Re, изучая новые способы включения более широкой демократической обратной связи в поведение CATGPT по умолчанию», — написала компания в своем блоге. «Мы надеемся, что отзывы помогут нам лучше отразить различные культурные ценности по всему миру и понять, как вы хотели бы развиваться CHATGPT (…), мы также считаем, что пользователи должны иметь больше контроля над тем, как ведет себя CHATGPT, и в той степени, в которой это безопасно и возможно, вносить коррективы, если они не согласны с поведением по умолчанию».

Previous post Дональд Трамп празднует 100 дней в офисе с ралли в стиле кампании | США новости
Next post Samsung предупреждает, что тарифы в США будут вмягчать чип памяти и продажи смартфонов