A、河水中含有泥沙、溶解的气体等多种物质组成的，所以属于混合物，故A错；

B、蒸馏水中只有水这一种物质，所以属于纯净物，故B正确；

C、硬水中含有较多的可溶性钙镁化合物，所以属于混合物，故C错；

D、自来水中含有消毒剂等其他物质，所以属于混合物，故D错．

故选B．