飲み会で弄り返されて怒る人が苦手

飲み会で怒る人が居ると場の空気盛り下がるから大人なら空気を乱さないように笑える弄り合いをするべきだと思うの。
私「最近読んだ本で〜」
相手「えっ、字読めたの？」
私「相手さんよりは読めますよぅ」
相手「は？！なにそれ？どういう意味だよ」←顔真っ赤、ガチ怒り
私「はいはい、どうどう〜」←頭撫でる
相手「何その態度！！ふざけんじゃねえ！」←怒鳴る
みたいな、ユーモアにユーモアで返せない人が苦手です。
そこを怒らずに「ひどぉーい！私漢検持ってるのにい」とか「源氏物語、原文で読めるー？」とか返せば「でも読めそうな顔に見えないw」とか「読めるわけないだろがい！」って頭パーンと叩いてツッコミ入れれば笑いになるわけで。。

コミュ力低い陰キャさんなのかなー？
ジョーク言うならジョーク返されても怒らないでほしい。