耳あか

おはようございます。
今日で４ヶ月になる娘についてご相談させていただきます。
１ヶ月前頃から乳児湿疹なのか、左の頬が赤く、耳から後頭部の下の方一帯がカサカサ と頭皮が白くなっています。
それと関係があるのか分かりませんが、耳介も赤く少し硬くなっていてお風呂上がりのお手入れでも垢が綿棒にたくさんつきます。ベビーオイルを綿棒で塗っているのですが、お手入れはこれで問題ないでしょうか？
また、以前から右耳の中が体臭のような？少しだけ臭いがあったのですが、今朝耳から小さな黒い塊が出てきました。
臭いの原因となっていた耳垢のような気がします。
耳の中に垢がたくさん詰まっているかもしれないと思うのですが、小児科か耳鼻科へ行った方が良いでしょうか？
耳垢は勝手に出てくるという話を聞いたこともあるのですが、耳垢が黒く固まってしまってはなかなか出てこないのではないかと心配です。
よろしくお願いします。