A、蜡烛燃烧生成二氧化碳和水，有新的物质生成，属于化学变化，故A正确；

B、灯泡发光没有新的物质生成，属于物理变化，故B错；

C、冰是水的固态，冰棒融化是由固态变为液态是状态发生了变化，所以属于物理变化，故C错；

D、酒精挥发是指由液态变为固态，只是状态发生了变化，没有新物质生成，故D错．

故选A．