遠方義実家への正月の帰省ができるか

はじめまして。9月1日で生後3ヶ月になる女の子を1人育てています。
産後から気になっている、義実家への帰省について相談させていただきます。

現在過ごしているところは比較的都会ですが、義実家は遠方の田舎で、公共交通機関を使うと、
電車＋飛行機または新幹線で5時間半と、車で3時間程度（休憩含めるともっとかかる）のところにあります。

里帰り出産したのですが、実家と義実家までは車で3時間のみだったため、産まれたあとは2度義両親が実家に会いに来られました。
緊急帝王切開だったのもあって産後の回復も時間がかかり、赤ちゃんも小さかったので、私達が義実家には行けていません。

最近、義母から「正月帰る？」と夫に連絡があり、夫は「直近にならないと分からない」と返事をしたそうです。帰省するならば、正月または2月後半の連休で帰省することになります。

私は産後の痛みや寝不足の中、気を遣い遠すぎる所へ行くのが凄くストレスで、入院中泣いていました。義両親とは仲はいいのですが、どうしても赤ちゃんを連れて行くプレッシャーに押しつぶされそうになります。今も、連れて帰られる自信がありません。
赤ちゃんとであれば、授乳や休憩もあり、赤ちゃんにも無理をさせてしまいそうです。

しかし、生後半年ちょっとたてば、そのくらいの遠距離移動はできると考えたほうがいいのでしょうか？移動する場合の気をつけること、移動出来ないと判断するのはどのような基準か？どう夫や義両親に伝えるといいのか？
アドバイスをいただきたいです。

よろしくお願いいたします。