В GPT-4-Turbo нашли новый баг: В декабре он выдает ответы короче, чем в другом месяце.
Пользователь Твиттера заметил, что если через API передавать новой модели GPT-4 системное время, то бот выдает более короткие ответы, когда он "думает", что сейчас декабрь, по сравнению с тем, когда он думает, что сейчас май (что определяется по дате в системном промпте).
Пользователь создал два системных промпта, один из которых сообщал API, что сейчас май, а другой - что декабрь, а затем сравнил результаты.
Для "майского" системного промпта среднее значение ответа в токенах составило 4298 токенов.
Для "декабрьского" системного промпта среднее значение составило 4086 токенов
2 комментария