A、氧气中含有氧分子，二氧化碳、二氧化硫、氧化铝、过氧化氢中没有氧分子．故错误；

B、氧气、二氧化碳、二氧化硫、氧化铝、过氧化氢五种物质的组成元素中都含有氧元素．故正确；

C、氧气属于单质．氧气是由一种元素氧元素组成的纯净物，属于单质．都是由氧元素和另外一种元素组成的化合物，属于氧化物．故错误；

D、氧气是由一种元素氧元素组成的纯净物，属于单质．二氧化碳、二氧化硫、氧化铝、过氧化氢等物质都是由不同种元素组成的纯净物，属于化合物．故错误．

故选B．