子どもじみた喧嘩になっちゃったね。妥協点として、妻に謝らなくても子どもには謝ってもらったら？押して家具にぶつけて怪我させたのは事実だし。
育児しないってことは父親やめるって事なんだが、そのつもりなの？離婚や別居するならもちろん、そのつもりがなくても育児を拒否してるところ録音して育児放棄の証拠にするといいよ。