A、冰棒融化的过程中只是物质的状态发生了改变，没有新物质生成，属于物理变化．

B、木材燃烧生成二氧化碳和水，属于化学变化．

C、湿衣服晾干的过程中只是水的状态发生了改变，没有新物质生成，属于物理变化．

D、灯泡发光的过程中没有新物质生成，属于物理变化．

故选B．