B
分析：对于纯净物来说根据元素的种类和多少来判断单质和化合物，根据物质中组成物质的多少来判断纯净物和混合物．
解答：A、氧化铝是一种由铝和氧两种元素组成的物质，属于化合物，水是一种由H、O两种元素组成的物质，属于化合物，空气中含有氧气、氮气等多种物质，属于混合物，故A错误；
B、冰水混合物是一种由H、O两种元素组成的物质，属于化合物，硫磺是一种只有S元素组成的物质，属于单质，高锰酸钾分解后的固体中有锰酸钾、二氧化锰两种物质，属于混合物，故B正确；
C、氧化镁是一种由镁、氧两种元素组成的物质，属于化合物，铁是一种只有铁元素组成的物质，属于单质，高锰酸钾是一种由锰、氧、钾元素组成的物质，属于化合物，故C错误；
D、碳粉是一种只有C元素组成的物质，属于单质，二氧化碳是一种由C、O元素组成的物质，属于化合物，澄清石灰水中含有水和氢氧化钙两种物质，则属于混合物，故D错误；
故选B．
点评：本题考查物质类别的判断，学生应学会利用组成元素和物质种类的多少来分析，并应熟悉常见混合物的组成．
