ainews
Почему шаблоны промптов должны быть общедоступными
Автор утверждает, что при публичной оценке языковых моделей недостаточно сообщить итоговую метрику — необходимо раскрывать полные шаблоны промптов. Исследования показывают, что даже незначительные изменения в формулировках инструкций могут менять результаты на десятки процентных пунктов и порядок моделей в рейтинге, поэтому промпт — часть измерительного инструмента, а не второстепенная деталь.
0
111
