おしっこの匂いが変

1歳の娘のおしっこの匂いがここ数日できつくなりました。薬品臭いというか、私がコーヒーを飲んだときに出る尿と同じ匂いがします。私はカフェインの影響かなと思って気にしていませんが、さすがに娘は飲むことはないので気になってます。ここ最近で変わったことといえば、卒乳して毎日飲んでいたミルク（合計240cc）を辞めたくたらいです。ミルクをやめたのでその分麦茶を積極的に与えてはいるのですが、補てるかは正直なとこ微妙です。このことが関係していますか？　そして、うんちも回数が減ってきました。
本人はいたって元気そうなのですが、病院に行った方がいいでしょうか？