哺乳瓶の拒否

生後4ヶ月です。
少し前からミルクを拒否することが増えました。基本は母乳だけなのですが、私が不在の時や寝る前は母乳はあげずにミルクだけをあげていたのですが、哺乳瓶をカミカミして全く飲まない時や、かと思えば飲むけど少しだけ飲んだら哺乳瓶を吐き出したりします。 毎日何回かは哺乳瓶で与えていますがだいたいこんな感じで拒否することが多いです。 離乳食も始まったら完ミにしたいと思っており、哺乳瓶以外で飲ませるならコップやストローマグなどになるのでしょうか？また、それなら何ヶ月頃から練習させてもいいのでしょうか？