A、水结冰由液态变为固态，没有新物质生成属于物理变化，冰融化是由固态变为液态，没有新物质生成属于物理变化，故A错；

B、酒精挥发指由液态变为气态，没有新物质生成，属于物理变化，酒精燃烧生成了二氧化碳和水，有新物质生成，属于化学变化，故B正确；

C、铁生锈生成了主要成分是氧化铁的新物质，属于化学变化，电灯通电发光没有新的物质生成，属于物理变化，故C错；

D、鸡蛋变臭说明有具有臭味的新的物质生成，属于化学变化，火药爆炸后有火药味，说明有新的物质生成，属于化学变化，故D错．

故选B．