某货主委托承运人的货运站装载1000箱小五金，货运站在收到1000箱货物后出具仓库收据给货主。在装箱时，装箱单上记载980箱，货运抵进口国货运站，拆箱单上记载980箱，由于提单上记载1000箱，同时提单上又加注“由货主装箱、计数”，收货人便向承运人提出索赔，但承运人拒赔。

根据题意分析回答下列问题：

判断承运人是否要赔偿收货人损失并给出理由。