ちょっと調べてみた。

見沼天然温泉 小春日和
というのがある。
アクセスは埼玉高速鉄道浦和美園駅より、国際興業バス大宮東口行き約20分乗車、染谷新道下車徒歩15分。
営業時間 10時〜24時
電話 048 686 3636

バスの本数あるか分からないし、直接電線入れて問い合わせしてみれば？
ダメ元かも知れないけど。
ご参考まで。