授乳時間について

こんにちは。
生後6ヶ月24日の息子についてです。

授乳時間についてご相談です。
現在の授乳はざっくり言うと4時、8時、12時、16時、20時の5回で、片乳5〜8分ずつ＋ミルク160〜180mlを与えています。
離乳食は現在1回食で、開始から3週間目（18日目）に入りました。8時の授乳の前に食べさせ、その後授乳しています。
ご相談したいのが、4時の授乳についてです。
当初、睡眠時間が長くなってきて、空腹で起きる時間が3時〜4時だったため、現在も4時すぎに授乳しているのですが、正直本人は自分で起きることが少なくなっています。
ほっといたらねてくれると思います。
起こしたときは寝ぼけながら、しっかり飲んでいます。
しかし、このときに目が冴えてしまうのか、このあとの寝かしつけが少し難しくなり、起床時間の7時まで、ベッドでしっかり寝れず、抱っこで寝ることがあります。
また、本人が起きないため、私も寝すぎてしまい、５時近くになってしまうことがあり、その時は尚更その後の寝かしつけが困難になります。
日中の授乳時遊び飲みをしたり、ミルクをしっかり飲めなかったりするので、4時の授乳をなくすことはあまり考えていないのですが、4時の授乳はやめて日中で稼いだほうがいいのでしょうか。
また、逆に1時間くらい早めたりしてもいいのでしょうか。
本人は空腹のサインを殆ど出さず、空腹でぐずることはあまりありません。
日中もこちらの都合で３時間半〜4時間半くらいの間隔で飲ませています。5時間空いてもあまりぐずりません。
なので時間を早めにずらしても、8時の授乳時に激しくぐずるようなことはないと思います。
よろしくお願いいたします。