任意売却のタイミングは難しいとも言われていますが、銀行などローンの借り入れ先から通知がきた段階で行動するのが良いでしょう。
そのまま通知を無視し続けると、最終的に不動産差し押さえになってしまいます。