私自身が子供側の経験したことあるけど、もう亡くなってしまったのならどのタイミングで聞こうが特に変わりはないなー。死ぬ前に会いたかったなーと思うだけ。
小4で父と離れて、主さんとこと同じで養育費や面会無かったから時々会ってみたいと思う気持ちになることはあったけど特に思い入れはない。