面接受けて、合否連絡前の辞退

先日面接受けた会社、これまでの職歴に関心持ってくれた面接官の受け応えも好感触で、これは期待できるかも…という印象だったんだけど、社内に保護動物がいる事が判明
保護活動は素晴らしいと思うし、優しい会社なんだなとは思うんだけど、私がアレルギーっぽくて（ちゃんと検査はしてないけど、喉や目が痒くなる、くしゃみ連発）もし採用になっても働けない予感
待遇はいいから、もし採用もらえたら騙し騙し働いてみようかなとも考えたけど、動物がいるってわかってるんだし続かなかったら時間もったいないなと
そもそも落ちてる可能性もあるんだけど、受かったわけでもないのにこちらから辞退申し出るには早い？
それともさっさと辞退連絡した方が、会社としては選考しすい？