ИИ
Китайскую нейронку MiniMax M3.1 Flash заподозрили в списанных тестах
ИИ
Китайскую нейронку MiniMax M3.1 Flash заподозрили в списанных тестах — исследователь Binkg утверждает, что модель не решает, а узнаёт вопросы из бенчмарка Artificial Analysis. Он слегка изменил вопрос, чтобы ответ стал другим, — справились все модели, кроме M3.1 Flash, выдавшей старый ответ.
Подозрение такое: MiniMax сама держит серверы и могла вытащить вопросы, пока M3 тестировали по API, а потом дообучить на них новую модель. Сейчас у M3.1 Flash 42 балла в индексе Artificial Analysis. Прямых доказательств пока нет.
За оценку не ручаемся.