彼のことが忘れられません

私は、32歳の主婦です。子供も2人います。
でも、5歳年下の彼と2年近く不倫をしています。
彼とは、ネットで知り合いました。
彼は、当時付き合っていた彼女のことで悩んでいて、
私は、旦那と仮面夫婦のような関係が続いていて、毎日辛くて・・・
私達は、お互い悩みを打ち明けて、どんどん親しくなっていきました。
彼が、彼女と別れたのをきっかけに、
私達は、もっと仲良くなり、お互い会って直接話したいって
思うようになりました。
そして、会うのは1度きりと決めて彼と会ったのですが、
彼に会って話してみると、彼は私の好きなタイプで一目惚れのような
感じで、彼のことを好きになってしまったんです。
彼も同じで、会った瞬間に私のことを好きになってくれていたようです。
この出会い系サイトで無料でメル友探し
それから、彼と体の関係を持つまで時間はかかりませんでした。
彼には、本気で好きになったと言われました。私も同じ気持ちです。
でも、私には子供がいるので、簡単に離婚するわけにもいかないのです。
先日、彼に「これ以上、一緒にいるのは辛い。」と言われ、
彼は私の元を去って行きました。
それからの私は、家事もろくに手が付かないほど落ち込んで、
ダメな母親になってしまいました。
でも、大好きだった彼のことを忘れることができなくて・・・
やっぱり、離婚して全てを捨てて彼の元へ行くべきなのでしょうか?