姑のきつい冗談に関して 長文になります…

長文になりますが、お付き合いください。

今、生後３ヶ月になる息子の母です。
旦那は長男です。
旦那には弟がいて、弟夫婦には2歳の娘さんがいます、弟夫婦は今月中に２人目が産まれる予定です。

義母は、冗談なのか嫌味なのかわからないようなことをよく言います。
例えば、お正月、義実家に私夫婦と弟夫婦が集まった際の帰り際には、

もうしばらく来なくていいわよ。
孫たちがもう少し大きくなったら、お父さんと逃亡しなきゃね。

と言われ、弟嫁と笑ってごまかしました。
しばらく来なくていいわよって、毎回言われます。
義実家には息子が生まれてからは、月１で伺っています。
息子が生まれたときに、どれくらいの頻度で会いたいか聞くと、月１と言われた為です。
弟夫婦も月１くらいの頻度で義実家に行ってるようです。

しばらく来なくていいわよって言われると、とても気分が悪いし、冗談なら言う必要ある？ってイラってします…

お年玉をいただいたので、帰って確認すると、五千円入っていたので、お礼の電話をすると、

[え？五千円も入ってた？返してくれる？]

って言われ、その場は笑ってごまかしました。
しかし、本当に間違えて五千円入れてしまったのかも？と思い、後日、旦那に電話してもらい、

[五千円間違えていれた？間違えたなら返そうか？]

と、聞いてもらうと、冗談だったようです。

このような嫌な冗談が多く、正直分かりません。
旦那は、冗談って分かるやろ、弟嫁も受け流してるやろうし、おまえは気にしすぎやって怒られます。

その他、小さい嫌味なども言われます。
小さいことは受け流してるんですが…

義両親には、月１は孫と旦那の写真を贈り、誕生日と父の日母の日は必ずプレゼントを贈るか持っていってます。
なにか不満があるのか…
私なりにかなり気を使ってるつもりなんです。

正直、どう接したらいいか分かりません。
良いアドバイスいただけたら嬉しいです。
長文にお付き合いくださり、ありがとうございました。