含有氧气要么是氧气本身要么就是混合物．

A、碳酸氢铵中只含有碳酸氢铵一种物质，不含有氧气，故A错误；

B、空气属于混合物，含有氧气、氮气、二氧化碳等多种物质．所以含有氧气；故B正确；

C、锰酸钾中只含有锰酸钾一种物质，不含有氧气，故C错误；

D、二氧化锰中只含有含二氧化锰一种物质，不含有氧气，故D错误．

故选B．