その質問をしてくる人は同性の方なのでしょうか？ご自身の参考にしたいのか何だかわかりませんが、例え同性でも、そういった事を執拗に聞いてくるのはある意味ハラスメント（妊活ハラスメント？）になると思います。
タイミングが合わなかったと既に答えていらっしゃるのですし、それ以上、もう答える必要は全く答える義理も何もないと思います。
逆に、また同じ事を聞かれたら、何故何度も同じ事を聞くのか、もうその質問はしないで欲しいとハッキリおっしゃって良いと思います。それと、その人に、いつ、何処で、どのように、その質問を聞かれたかなどの詳細を、メモされておくと良いと思います。
会社によってはコンプライアンス室を設けている場合もありますし、度が過ぎるようでしたら、人事に相談するなども必要になってくるかもしれませんので、その際はメモが役に立つかと思います。