この汚れの大部分は、水に含まれるカルシウムが他の汚れと一緒に固まってしまった水垢です。
水垢にはクエン酸が利きますので、クエン酸水をスプレーしてスポンジなどでこすればだいたいは落ちるはずです。