A、氧气由一种元素组成，属于单质，不是氧化物，故A错；

B、氧化铝由铝和氧两种元素组成，属于氧化物，故B正确；

C、高锰酸钾由钾、锰、氧三种元素组成，不属于氧化物，故C错；

D、铝由铝一种元素组成，属于单质，不属于氧化物，故D错．

故选B．