旦那と別居で、旦那に実家に帰ってもらうって変ですか？

すみません長文です

離婚を考えていて、まず別居したいと思っています
今も家庭内別居みたいな感じになっていて
一ヶ月以上まともに話していなくて食事は別々、寝室も別です
子どもは一歳3ヶ月です

今住んでいるのは、わたしの祖母のお姉さんが住んでいた家で、
その人が亡くなったため空き家になっていたのを、息子さんに許可を得て借りています

わたしが実家に帰るのも考えたんですが、
子どもが今の家に慣れているのであまり環境を変えたくないことや
旦那一人が今この家に住むとなると旦那はすごくだらしなく、
家の管理がまともにできないと思うので、(掃除しない、お風呂カビさせるなど)それは家の持ち主に失礼なので
わたしが今の家に住もうと思っています

以前も、旦那に別居の話を持ちかけたことがありますが
実家には帰れないと言われました。
わたしたちは以前旦那の両親と同居していましたが、二世帯住宅とかでなく、義姉が週2以上子連れで来たり泊まらせにきたり
義両親もわたしの私物を勝手に使ったりと我慢の限界がきて別居しました

旦那は義両親に、
「お前一人で家に簡単に帰ってくるな。一人で泊まりに来ることもするな」
と言われたらしく、実家には簡単に帰れないんだと言われました

わたしから義両親に話をしに行き、別居したいと思っています

旦那は借金もあったので、この機会にそのこととかも話そうと思っています

こういうことをするのって自分勝手すぎるでしょうか？