経営者の妻として

2歳半の子供がいて、保育園に預けて
夏頃から経理事務を手伝うようになりました。
勤務時間は週4で通勤時間合わせて9-17時ぐらいです。
中々忙しく、他の事務員さん達に負担が大きくかかっていることは確かですが、私的にはこれ以上子供との時間を犠牲にしてまで仕事をしたくないと思っています。
でも他の従業員さん達からは社長の嫁なんだからもっと働けと思われています。
皆さんなら子供との時間を犠牲にしてもご主人の為に会社を手伝いますか？
辞めた方がいいのか迷っています。
主人は二代目です。義母は自由に会社に出入りしてますが、私はものすごく厳しく見られています…。