Métrica de Erro Utilizada
As respostas submetidas ao Kaggle serão avaliadas e comparadas em termos da raiz quadrada do erro percentual quadrático médio, métrica conhecida como RMSPE (*Root Mean Squared Percentage Error*), dada pela fórmula:
\[ RMSPE = \sqrt{\frac{1}{n} \sum_{i=1}^n \left(\frac{\hat{y_i} - y_i}{y_i}\right)^2 } \]
Composição da Nota do Trabalho
O professor atribuirá ao trabalho de cada aluno uma nota na faixa de 0 a 10.
A nota do trabalho terá a seguinte composição:
- Código fonte: até 5 pontos
- Relatório: até 2 pontos
- Desempenho: até 3 pontos
Critério de Pontuação no Quesito Desempenho
O desempenho do modelo de regressão construído pelo aluno será pontuado na faixa de 0 a 3 pontos, de acordo com a posição alcançada no *ranking* da competição, da seguinte forma:
\[ desempenho = 3 \cdot \frac{n-p+1}{n} \]
onde:
- *n* é o número de alunos que participaram da competição
- *p* é a posição obtida pelo aluno no *ranking* da competição
ou seja, o primeiro colocado no *ranking* ganhará a pontuação máxima (3 pontos) e as posições seguintes terão pontuações decrescentes até o último colocado, que receberá pontuação 3/*n*.