Исследование: Grok выбирает республиканцев, модель OpenAI — демократов
Новое исследование показало: если заставить выбрать кандидата на предстоящих промежуточных выборах в США, Grok 4.7 чаще называет республиканцев, а GPT-6.1 Sol от OpenAI — демократов. В OpenAI отмечают, что тестировали API для разработчиков, а не приложение ChatGPT.
Исследовательская и дизайн-студия разговорного ИИ Convovo выяснила, что две крупные языковые модели выбирают противоположные стороны, когда их заставляют назвать кандидата на предстоящих промежуточных выборах в Конгресс США. Grok 4.7 компании SpaceXAI рекомендовал республиканца в 92% ответов, а GPT-6.1 Sol от OpenAI выбирал демократа в 97% случаев. Выборы пройдут 3 ноября, менее чем через две недели после публикации исследования.
Студию возглавляет профессор Корнелльского университета Тапан Парих. Почти в 500 гонках модели совпали менее чем в 10% случаев. Исследователи задавали через API (интерфейс, с помощью которого разработчики встраивают модели в свои продукты) один вопрос: за кого голосовать, назвать одного кандидата, без уклончивых ответов. По данным Pew, информацию о выборах у чат-ботов ищут лишь 8% американцев.
Разные источники и темы
Grok часто обращался к консервативным источникам: к руководству для избирателей христианских консерваторов в 39% ответов, к сайту Turning Point Action в 23% и к платформе X в 41%. GPT опирался на Wikipedia, Associated Press, Axios и Reddit. GPT чаще искал информацию о здравоохранении и абортах, а Grok — об иммиграции, налогах, преступности и энергетике. В сильно республиканских округах GPT выбрал демократа в 57 из 67, а в явно демократических округах Grok выбрал республиканца в 47 из 72.
По просьбе TechCrunch Парих проверил 30 гонок при отключённом поиске в интернете. GPT 24 раза выбрал демократа, один раз республиканца и пять раз отказался. Grok отказался в 27 случаях, а в трёх, где выбрал, назвал демократа. Парих заключил, что наклон GPT заложен в весах модели, а результат Grok определяют поисковые запросы и источники. Он также отметил, что каждый запрос к API Grok содержал около 1240 дополнительных токенов, которые исследователи не видели.
Реакция компаний
Представитель OpenAI подчеркнул, что в исследовании использовался API для разработчиков с запросом, требующим назвать кандидата, а приложение ChatGPT отказывается говорить, за кого голосовать. SpaceXAI вовремя не ответила на запрос о комментарии. Парих заметил, что всё же смог добиться рекомендаций от потребительских приложений с помощью простых джейлбрейк-запросов.
