A、壶烧水后出现水垢，是因为加热后水中溶解的某些可溶性钙、镁化合物发生化学变化，生成了一些新的难溶性固体物质即水垢，属于化学变化．故A错；

B、牛奶变酸是由于牛奶中的某些物质发生化学变化生成了新的酸性物质，属于化学变化．故B错；

C、寒冷冬季室内窗户玻璃出现水雾，是由于冬天室外温度低，室内的水蒸气遇冷液化的结果，水蒸气和水雾是水这一种物质的两种不同状态，这一过程中没有新物质生成，属于物理变化．C正确；

D、铁钉生锈，生成了新物质铁锈，这一过程发生的是化学变化．属于化学变化．故D错．

故选：C．