私は被害にあった側です。

ハッキリ言って主さんの態度次第です。
夜泣きはしょうがないですが、それをどれだけ迷惑かけないよにやってるかが重要ですよ。夜中のドライブはまた起きて泣くのなら止めてください。静かになった～とホッとして寝ようとしたらまた泣き声に起こされる。ハッキリ言ってイライラ倍増ですよ！
私の隣の人は、赤ちゃんが泣くのは当たり前、夜泣きだってしょうがないじゃん！みたいな態度で、会っても挨拶なしの謝りすらなし。しかも夜泣きが始まっても部屋の移動をしない、窓閉めないので私は不眠症になりました。だから管理会社に言って追い出してもらいましたよ。(夜泣き以外に非常識が多々あったので)
これが、会うたび「うるさくてスミマセン」や夜泣きが始まったら窓を閉め違う部屋に移動してるのが分かってたりすると、こちらもおおらかな気持ちで見守れます。

大変だと思いますが頑張ってください。
長文失礼しました。