Участникам6 мин
Правила и метрики
Правила определяют допустимый эксперимент, а метрика — направление оптимизации. Разберите оба контракта до первого серьёзного запуска.
Зафиксируйте границы задачи
Проверьте разрешённые данные, внешние источники, командные правила, сроки, вычислительные ограничения и формат сдачи. Если формулировка неоднозначна, задайте вопрос организатору до использования спорного источника.
Поймите направление и агрегацию метрики
Уточните, минимизируется или максимизируется результат, как обрабатываются классы, веса, группы и пропуски. Локальный scorer должен повторять публичный контракт, включая постобработку и округление.
Учтите split и лимиты
Public и private части leaderboard могут использовать разные подмножества. Не подгоняйте решение под публичный скор; сохраняйте локальную валидацию и следите за дневными и общими лимитами отправок.
Проверьте контракт перед загрузкой
Сверьте sample submission, порядок идентификаторов, типы и диапазоны значений. При расхождении локальной и платформенной метрики сначала проверьте split, leakage, индексы и версию данных.
Проверка перед следующим шагом
- Разрешённые данные и ограничения однозначны.
- Направление и формула метрики воспроизводятся локально.
- Validation split не зависит от публичного leaderboard.
- Формат результата совпадает с sample submission.