子育て中の自由時間

3ヶ月の子どもがいます。

主人は普段から育児には参加してくれています。
休日に主人が入院している友達のお見舞いと洗車に
出掛けたいと出掛ける前日に言ってきたので快くOKしていました。

ただ、当日になり、私もやりたいことがあったので
16時ぐらいに帰ってきてねと言うと、
「俺に自由な時間はないのか！」と怒られました。

朝から16時まで、私からすれば十分な自由時間だと思っていましたが、縛られるのが嫌だとかそのあとグチグチネチネチ言われました。

私、そんなにおかしなこと言ってますか？