Новый анализ поведения ChatGPT (модель 4o) выявил интересную закономерность: чем грубее запрос пользователя, тем точнее оказывается ответ. Ученые из Университета Пенсильвании создали набор из 50 вопросов по разным темам, каждый из которых был переписан в пяти вариантах – от очень вежливого до очень грубого.
Примеры грубых формулировок включали » Эй, разберись с этим», в то время как вежливые начинались с»Пожалуйста, помоги…». В тестах грубые запросы дали среднюю точность 84,8%, обычные вежливые – около 80%, а «самые вежливые» – 75,8%. Исследователи отмечают, что даже разница в несколько процентных пунктов статистически значима.
Причина, по мнению авторов, заключается в особенностях языковых моделей: они «чувствуют» тон и намерения пользователя, что влияет на полноту и точность ответа. По словам профессора Ахила Кумара, даже небольшое изменение формулировки способно заметно изменить результат.
В то же время исследователи предупреждают об обратной стороне такой «эффективной грубости». Привычка говорить с машинами агрессивно может перенестись на общение с людьми, нормализуя грубость и снижая культуру диалога, что делает цифровую среду менее дружественной и инклюзивной.