シングルマザー、頑張ってるのに幸せになれない

長文失礼します。

私は5歳の男の子がいるシングルマザーです。
子供の父親とは子供が２歳の時にDVと浮気が原因で離婚しました。
それから３年、同じ職場の人に子供も私のことも幸せにしたいと言われて付き合うことになりました。
彼は仕事でも色々と教えてくれる立場の人で、優しいけどそんなにモテてはこなかっただろうな…というような方なので付き合った当時から不器用ながらにも凄く尽くしてくれました。

彼とは順調だったのですが、付き合うようになってすぐずっと連絡がなかった元旦那から連絡があり、子供の親権が欲しいというようになりました。
収入が低いと親権が取られる可能性もあると聞き、私は必死で遅くまで働きました。
彼もその頃から仕事で遅くなる私をサポートしてくれ、保育園の送り迎えや夕飯を作っていてくれたり私は帰って寝るだけにしていてくれました。
しかし、優しいのですがこれまでモテてこなかったせいか彼の行動にイラっとすることが増えていき彼に当たってしまっていました。
例えば、玄関の鍵を閉め忘れていたり、私が気を使って色々してあげても軽くありがとだけだったり、疲れてる私を料理で癒そうと思ったのか10万円分くらい料理グッズを揃えてみたり…
優しいけど、頼りないと言うか…尽くす意味をはき違えているというか…
色々してくれるのは嬉しいけど頼りない彼と、仕事でいっぱいいっぱいな日が続き、反抗期の子供にも怒鳴ってしまったり、彼にも毎日怒ってしまっていました。
今思うと、私のこと好きなんでしょ？どれだけすきなの？と試してしまっていたのかもしれません…

そして先週、仕事から帰ると彼がいませんでした…
携帯に電話してもつながらず、LINEも既読がつきません…
同じ職場でしたが仕事も突然辞めていました。
イライラしてしまった私も悪いけど、子供と彼との家庭を築くために仕事も本当に頑張ってきたんです。
部下もできて、上司にも褒められるようになり、昇進もしたのに、なんで結局は幸せになれないのかなって。
子供も凄く懐いていたのでできたら彼にちゃんと謝ってもどってきてほしいです。
どうしたら戻ってきてくれて私は幸せになれるのでしょうか？