A、氧气是一种只有氧元素组成的物质，属于单质，故A错误；

B、水是一种含有H和O两种元素且有氧元素的物质，属于氧化物，故B正确；

C、硝酸钠中含有Na、N、O三种元素，属于化合物，但不属于氧化物，故C错误；

D、氢氧化钾是由K、H、O三种元素，属于化合物，但不属于氧化物，故D错误；

故选B．