Чек-лист раскрытия информации для институтов, сравнивающих большие языковые модели
Статья описывает, почему институциональные сравнения LLM часто непригодны для воспроизведения результатов: отсутствуют ключевые детали о версиях моделей, промптах, настройках инференса, данных оценки. Авторы предлагают строгий чек-лист раскрытия информации, чтобы сравнение стало доказательством, а не красивой презентацией.
0
216