ミルクの水について

お世話になっております。
生後6カ月の娘のミルクと離乳食についてです。

今までミネラルウォーターを使ってどちらも作っていたのですが昨日買い忘れてしまいました。
後で買いに行くこともできるのですが、もし水道水でミルクを作ってもいいならこれから水道水で、作ろうと考えています。

そうなると、完全ミルクなので、口にするものが全て水道水で作ることになります。もちろん沸騰はさせますが与えても大丈夫なんでしょうか？今までずっとミネラルウォーターだったので心配です。よろしくお願いします。