モラハラ旦那から逃げてきたけど

モラハラ旦那に耐えられなくなり、金曜の夜に徒歩15分程の実家に小学生の子2人連れて逃げてきました。今もまだ実家に居ます。旦那は話し合いに応じてくれません。実家にいる事によって色々問題点があるので箇条書きで失礼します。
・子供達が自宅にいる時のように自由に友達と遊べない。
・登校班かあるので朝、集合場所まで実母が仕事行くついでに送って行く事になる(我が家の車は旦那に鍵を持ってかれてる)。
・帰りは私が自宅で待ってて一旦そこへ帰る事になる。旦那が平日休みの日は自宅で待てない。
他にも問題があると思うのですが、子供達の為に自宅に戻るべきなのでしょうか？
因みに旦那は子供達にもモラります。