# Evaluation
这里采用AUC来进行评价,AUC的详细计算方法[见此](https://en.wikipedia.org/wiki/Receiver_operating_characteristic)

# Submission File
对于在测试集中的每个`id`，我们都需要输出改条数据User点击Item的概率，我们的提交文件需要包含一个header，并且格式样例如下：
```
ID	predict
3363694	0.944
3363695	0.483
3363696	0.178
```