私も妊娠中温泉にいきました。
祖父の法事で親戚一同が集まることになっていたので。
温泉には入らず部屋風呂にしました。
２歳の上の子もいたので。
皆さんが言うように旅行に行く元気があるなら大丈夫じゃないですか？
旅館側に求めるのではなくプランとかで旅館を決めた方がいいです。貸切や部屋に温泉付きもあるとおもいますよ。