精神的不安定

宮川様
いつもありがとうございます。
精神的に不安定で辛いです。生後3ヶ月になり、子供は体力も付き、泣き声もかなり大きくなりました。母が一緒に見てくれている時は、気持ちにゆとりができ、子供の泣きにも冷静に対処できるようになったのですが、母の体調が良くない時は1人で自宅で2人きりになると余裕が無くなり、子供が泣くと自分まで泣いてしまいます。午前中は、仰向けで体操や歌、手遊び、座らせてスキンシップ、うつ伏せ運動、外気浴をすると1時間位は疲れて寝てくれますが、毎回は間が持たず、散歩に連れ出しても、私が疲れてしまいます。
散歩後に寝てくれず、泣き叫ばれると、抱っこすり気力、体力がなく、ただただ辛くなる一方です。
産後うつと診断され漢方のみ内服しています。母乳をあげる気力も無くなり、生後2ヶ月で完ミになりました。精神科の先生からは、抗うつ剤を勧められていますが、先月まではかろうじて母乳をあげていたので断ってきました。完ミの今、抗うつ剤に頼るべきか迷っています。迷っている理由は、以前仕事のストレスでうつ病になり、妊娠発覚まで抗うつ剤を内服しており、一度飲み始めると、やめるのが大変で、やっと薬を飲まなくなったのにとの気持ちがあるからです。 
抗うつ剤で何か変わるでしょうか？この辛さが和らぐのでしょうか？ご意見伺いたいです。