寝室の温度と赤ちゃんの様子について

いつも相談に丁寧に回答いただきありがとうございます！4ヶ月の男の子を育てています。今回、寝るときの室温や服装でご相談です。

 いつも寝室は同じ部屋で私がベッド、隣に息子をベビー布団で寝せるか、ベビーベッドで寝るようにしています。ここ最近、夜が寒くなり 、我が家の寝室も温度が下がってきたせいか朝起きると息子の手がとても冷たく、色も白っぽくなっています。足は掛け布団（ベビー布団かタオルケットのようなもの）がはだけてなければ暖かいです。赤ちゃんは手足で体温調節をしていると聞きますが、手がこんなに冷たくて大丈夫なのか心配です。ちなみに夜はまとまって5時間〜8時間くらい寝ており、鼻詰まりは多少ありますが熱を出したりはしていません。
寝るときは特に暖房はまだつけておらず、室温計は21度になっていますが、部屋が少し隙間風があり体感としてはもう少し低い気がします。寝るときの服は短肌着の上に長袖ロンパースで、布団を下半身にかけるので足は出しています。 あまり厚着させると SIDSが怖いですし、かといって薄着で寒くて風邪をひかせるのも可哀想で…。

寝ているとき手が冷たいのは問題ないことなのか、室温はもっと上げた方がいいのか、暖房よりももう少し厚着にした方がいいのか、アドバイスいただけるとありがたいです。
宜しくお願いします。