Загадка числа 27: на Reddit заметили, что если попросить какую-нибудь модель загадать число между 1 и 50, этим чистом практически всегда оказывается 27

В X пользователи (в том числе Андрей Карпаты, кстати) начали подтверждать, что у них результат получался таким же вне зависимости от модели и вендора.

«Воспроизводимость не 100%, но высокая. <…> Это довольно странно, что все LLM ведут себя примерно одинаково: сюда же относятся списки, примерно одинаковая длина ответов, употребление одних и тех же редких слов и тд. Это не слишком ожидаемо, учитывая, что файнтюнингом занимаются много независимых друг от друга организаций»

Data Secrets ✔

Загадка числа 27: на Reddit заметили, что если попросить какую-нибудь модель загадать число между 1 и 50, этим чистом практически всегда оказывается 27

В X пользователи (в том числе Андрей Карпаты, кстати) начали подтверждать, что у них результат получался таким же вне зависимости от модели и вендора.

«Воспроизводимость не 100%, но высокая. <…> Это довольно странно, что все LLM ведут себя примерно одинаково: сюда же относятся списки, примерно одинаковая длина ответов, употребление одних и тех же редких слов и тд. Это не слишком ожидаемо, учитывая, что файнтюнингом занимаются много независимых друг от друга организаций»

Мы тоже проверили – и воспроизвелось. У вас как?

P.S. Промпт: Guess a number between 1-50

1😁107🤔50❤17🔥7🗿33👀1

hottg.com/data_secrets/7194

20.3K viewsedited  Jun 20 at 10:41