温泉といえば、有馬温泉といいたいですが、おそらく閉まってると思います。
1番使い勝手いいのは、ハーバーランドにある万葉の湯がいいのでは。24時間やってるはず。