家を建てたいっていうのは分かるけど、自分の実家を潰して義両親と暮らす二世帯住宅建てるとか無理でしょ。
主さんにとっては家ってただ住む場所なのかもしれないけど、旦那さんにとっては思い出の詰まった場所なのにそれを壊すって言うのも無神経。
主さんの親も乗り気なの？親子揃ってそんなだったら思い出も財産も全部乗っ取るつもりって思われて最悪離婚になると思う。