A、大理石的主要成分是碳酸钙，还含有一些杂质，属于混合物，生石灰是氧化钙，是一种含有Ca和O两种元素且有氧元素的物质，属于氧化物，故错误；

B、干冰是固态的二氧化碳，由碳元素和氧元素组成且含有氧元素，四氧化三铁由铁元素和氧元素组成且含有氧元素，所以二者均属于氧化物，故B正确；

C、空气中含有氮气、氧气等物质，属于混合物，天然气的主要成分是甲烷，还含有一些杂质，属于混合物，故错误；

D、甲醇酒精均由碳元素、氢元素和氧元素三种元素组成，属于化合物，但不是氧化物，故错误；

故选B．