職場の苦手な人と普通に話すには

同い年なのですが(３１歳)
こっちはパートで向こうは社員。

入社したときからそっけなくて目も合わせてくれない。
私以外の人にはにこやかだし大きな声で笑ったりしててかなりフレンドリー。
私が話すと無反応・無表情。
よくもまあこんなに器用に使い分けできるなあと感心するレベルです、、、、。

友達に相談したら、「実家暮らしで独身だから、子供いる人に嫉妬してるんじゃない？」と言われましたが、私以外の子持ちのパートさん(40代の人たち)にはめちゃくちゃにこやかです。
なので子供の有無は関係ないかと。。

仕事のこと話しかけてもたまに無反応で、業務に支障が出るので、せめて普通に会話したいのですが、その人は一体私の何が気に食わないのでしょうか。。
ちなみに趣味とかは合わないので共通の話題とかもありません…。

その人以外みんないい人なのですが、最近その人と関わるストレスがやばくて辞めたいです。