A、用吸管吸饮料时，吸出吸管中的部分空气，使吸管内的气压减小，瓶中饮料在大气压的作用下，上升通过吸管进入口中，故A利用了大气压的作用；

B、火箭升空是，是燃烧燃料，将燃料的内能转化为火箭的机械能，使火箭上升，故B没有利用大气压；

C、用抽水机抽水时，活塞向上运动，使抽水管内的空间增大，气压变小，大气压把水压入抽水管内，故C利用了大气压；

D、抽气机将洗盘内的空气抽走，是吸盘内的气压大大减小，吸盘在外面大气压的作用下，被紧紧的压在玻璃上，故D利用了大气压；

故选B．