仕事で私が何かすると不機嫌になる同僚

私が仕事で例えば、ゴミが溜まっているのを捨てたり、休んだ人の仕事が大変そうなのを手伝うと怒ります。
また私が、来客した人が部署が分からずに迷っていたのを案内してもどこからか見ていて怒ります。なぜそんなことするのか、困る。と言います。上司に相談したら気がついた時はしてほしいと言われました。お互いパートだからあまり仕事ないから気づいたときにゴミ捨てや掃除などしてほしいと言われています。ただそれをするとそのパートは怒ります。
上司が私に仕事をふっても怒ります。上司が言うにはそのパートは自分が必要ないと、勘違いすると怒ると言います。
私はすぐその人が怒るからその人の機嫌を考えてしまってやりにくいです。
私が何かいいことをしたり仕事を早くすると自分ができないと思うのが嫌なんだと思います。
そのパートも私に冷たく挨拶しても声は出さず反対向いて頭下げるだけのような態度で何か話しかけてもそっけないです。他の人とは話します。
気にしないようにするしかないですかね。