正社員　辞めるのはもったいない？

現在短時間勤務の正社員(9:00-16:00)で新卒から10年程勤めています。
子供保育園児2人、下の子が小学校にあがるとフルタイムに戻ります。会社自体は福利厚生も良くホワイトで、今は業務を配慮してもらっていますが、フルタイムに戻るとかなり残業がある部署にいます。(海外との時差、コロナ前は海外の来客交渉のため)
時短でも本当に胃がキリキリします。
英語ができるため、他部署に異動させてもらえる雰囲気も無いです。
フルタイムに戻った後、部署異動させてもらえないなら辞めたいと思うようになりました。

今でも精一杯のなか、さらにフルタイムに戻り残業で遅くなると子供との時間がとれなくなるのが本当に辛いです。勉強も見てあげたいです。

主人は医療従事者で激務です。
世帯年収2千万弱ですが、私の収入はずっと家計に入れてません。子供の服や教材をネットで買うぐらいです。
正社員を辞めても子供が学校の間はパートをしたいです。
とりとめのない文章で申し訳ないですが、正社員を辞めるのは甘えですか？もったいないですか？定年まで今の仕事をすると思うと絶望感があります。