職場にADHDを公表して後悔してる

精神科医の先生に
「自分がADHDなのは職場にはきちんと話して。隠すと大変なことになるから」
と言われたので公表しました。初めは、社長だけに公表していたのですが、入院したり通院でちょくちょく休みをもらったり社長が私にばかり気にかけることを不審に思って、最終的には全員が知ることで、周知されるようになりました。みんなが私の特性を理解してもらえた。と最初は喜んでましたし快適に過ごせました。

何不自由なく快適に働けていたのに私が夫との離婚を考えていて、私がADHDの公表がネックになりました。
「離婚したら、今みたいに短時間勤務や週4勤務は出来ないよ。今よりもがむしゃらに働くしかない。朝から晩まで毎日働く。もしくは今の仕事と掛け持ちして深夜帯に働くとか。そうしないと子供たち養っていけないよ。高校生と中学生の子供がいて、どうやって生活するの？」
「旦那さんと仲直りしな。旦那さんの収入がないとやっていけないでしょ。子供に関するいろいろな手続きやら出来る?離婚したら離婚届出したり籍を旧姓に戻したり住所変更の手続きを市役所でしなきゃいけないんだよ。出来るの?」
とか言われます。私が生活困窮に陥ると心配しているみたいですが、母子手当をもらえるのでそこまで困窮になるとは思えないのですが、実際どうなんですか？わたしを脅してるみたい