A、用碳酸氢钠治疗胃酸过多，是利用了碳酸氢钠能与胃酸发生化学反应，需要发生化学变化就能表现出来，是利用了其化学性质，故选项错误．

B、用大理石作建筑材料，不需要通过化学变化才表现出来，是利用了其物理性质，故选项正确．

C、用熟石灰改良酸性土壤，是利用了熟石灰能与酸发生化学反应，需要发生化学变化就能表现出来，是利用了其化学性质，故选项错误．

D、用稀盐酸除去铁锈，是利用了稀盐酸能与铁锈发生化学反应，需要发生化学变化就能表现出来，是利用了其化学性质，故选项错误．

故选B．