相手に大切にされていないと言われたら。

旦那は単身赴任で毎日電話してくれます。実家に滞在していた時、私が夜は食べに行くかもしれないからその時はメールするから電話はしなくて良いよって言ったのですが、メールを忘れてしまい、電話にも出れず、謝罪の連絡をしたのですが、旦那の態度は不機嫌なままです。
直接謝罪もしたのですが、旦那的には大切にされていないと感じたと言うので、謝罪以外でどうすれば良いか分かりません。
日頃から感謝を伝えたりして、他愛のない話をしてると思うですが、旦那から大切にされたいないって言葉が出てきたので、離婚したいのかな？と考えてしまいます。
話し合いはするのですが、謝罪以外の対応が見つかりません。