Новини бізнесу - Нові моделі штучного інтелекту від Meta опинились в центрі скандалу

Нові моделі штучного інтелекту від Meta опинились в центрі скандалу

На минулих вихідних компанія Meta представила дві нові моделі штучного інтелекту Llama 4 – Scout і Maverick. Вони стверджують, що ці моделі перевершують GPT-4o та Gemini 2.0 Flash в різних тестах. Однак виявилося, що статистика, яку надала Meta, може бути маніпуляцією. У прес-релізі Meta зазначила, що модель Maverick виявилася на другому місці у рейтингу LMArena з високим ELO-рейтингом. Проте користувачі виявили, що модель, яка тестувалася, була експериментальною версією, спеціально налаштованою для чатів. Це не було вказано відразу, але пізніше Meta підтвердила цю інформацію. LMArena звинуватила Meta у тому, що вони не відповідають їхнім очікуванням від постачальників ШІ-моделей і почали оновлювати правила, щоб уникнути подібних ситуацій у майбутньому. Компанія вважає, що коли постачальники можуть надавати спеціально налаштовані версії моделей для тестування, то рейтинги, як LMArena, стають менш значущими як показники реальної продуктивності.

Більше від автора

Новини спорту - Різниця у віці: Варді та вихованець Лестера встановили рекорд АПЛ

Різниця у віці: Варді та вихованець Лестера встановили рекорд АПЛ

Новини України - РФ формує штурмовий батальйон із хворих на гепатит та ВІЛ - Сили оборони

РФ формує штурмовий батальйон із хворих на гепатит та ВІЛ – Сили оборони

Залишити відповідь

Останні коментарі

Немає коментарів до показу.