今はこのご時世だから引き受けたい業者は探せばあります
作業途中ですが、今更お断りは可能ですか？お困りになりませんか？
可能であれば（今更だけど）事情をお伝えになっても良いと思います
その感じの悪い人が引き続きいらっしゃるのが「怖い」と
今はすぐに恐ろしい事件にもなる時代です
工事中にお一人の場合でもご自分とお子さんがいる場合でも怖くないですか？
ひとまず穏便に、その旨、ご主人からお電話してもらったらいかがですか？
どういう結論でもトピ主さんの心が軽くなりますように祈っています