Yが何を言おうが、あなたは即上司に相談すべきだよ！
他の方のコメントにもあるけど、Yは社用携帯を無関係の他人に触らせてるんだよ。守秘義務違反だし情報漏洩だよね。それを知りながら…ってあなたも責任を負わされるリスクがあるよ。
とりあえずLINE履歴のバックアップを撮り、スクショも撮っておいてね。

そして、連絡は全て上司を含めるようにした方がいい。LINEならグループに入れる、メールなら必ず履歴付きでCCなりBCCに入れる。

上司、会社が先方に対してどう対処するのかは任せる。
こんな危険なボール、自分の手元に置いといくのは悪手だよ。