CTR prediction 연구에서 공통된 평가 방식이나 표준화된 벤치마크가 부족하다. 다양한 모델들에 대하여 벤치마크를 진행하였고, 해당 결과나 진행한 코드는 reproducible 하도록 공개하였다. 벤치 마크 결과 여러 모델이 기존과 큰 차이를 보이진 않았지만, 기존 논문에서 report 된 결과와는 차이가 있었다.
동일한 모델이라 할지라도 데이터 전처리 방식이 달라지면 두 논문의 결과를 비교하기 어렵다.
CTR prediction 연구에서 공통된 평가 방식이나 표준화된 벤치마크가 부족하다. 다양한 모델들에 대하여 벤치마크를 진행하였고, 해당 결과나 진행한 코드는 reproducible 하도록 공개하였다. 벤치 마크 결과 여러 모델이 기존과 큰 차이를 보이진 않았지만, 기존 논문에서 report 된 결과와는 차이가 있었다.
동일한 모델이라 할지라도 데이터 전처리 방식이 달라지면 두 논문의 결과를 비교하기 어렵다.