上掛けをけ飛ばし、何もかけずに寝ていますが大丈夫でしょうか？

赤ちゃんは大人と比べると体重が少なく、表面積が大きいわりに皮下脂肪が少ないので、大人より外界の温度に敏感に反応し、暑さも感じやすいと考えられます。
加えて赤ちゃんは夜じっとして寝ているわけではなく、あちこちに転がり、寝ている間に頭と足の位置が逆になっていることもあるくらいですから、夏の軽いタオルケットなどはどこかに行ってしまいます。

赤ちゃんは熟睡しますので、明け方の多少の寒さには気がつかずに寝てしまったり、汗をぐっしょりかいている場合では、体温が下がってしまうことがあります。このような状態を「寝冷え」といって、体調を崩したり、風邪のもとになったり、おなかをこわしたりするきっかけにもなるので、気をつける必要があります。

暑いからといって裸で寝かせたりはしないようにしてください。厚手でなくても、長そでのおなかが出ないパジャマを着せるのがよいでしょう。
昔から「金太郎さん」といった赤ちゃんが動いてもおなかの部分がはずれない、腹当てのようなものがあるように、おなかの部分が冷えないようにすることは大切です。赤ちゃんが動けないようにぐるぐる巻きにするのは、寝ているときの動きを制限してしまうのでおすすめできませんが、パジャマで体を冷やさない工夫をしてみてはいかがでしょうか。
朝夕が冷える時期になったら、おなかだけでなく肩も冷やさないように注意してください。