A、食醋除水垢，有二氧化碳气体生成，属于化学变化，故A错误；

B、浓盐酸挥发是由液态转化成气态，只是物质的状态发生了变化，属于物理变化，故B正确；

C、黑糯米酿酒有新物质生成，属于化学变化，故C错误；

D、纯牛奶变酸的过程中有酸性物质生成，有新物质生成，属于化学变化，故D错误．

故选B．