私なら迷わず家族3人で渡米するけどなぁ。
海外で知り合いがいないのは不安だと思うけど、余程の場所でない限り日本人はいます。きっと小さいお子さんがいたり同じ環境の家庭もあると思う。
職場復帰するつもりがないなら、すぐに会社に退職の意向を伝えて。