Q：旦那が不倫をしていて「どちらか選べない」と言われました

Q：旦那が不倫をしていました。相手は同じ職場の後輩です。1度だけの不倫なら許そうと思っていたのですが、夫には「家族も〇〇(不倫相手の名前)もどちらも大切。選べない」と言われてしまいました。私はまだ旦那のことが好きですが、周りからは別れろと言われます。別れたら、きっと旦那は不倫相手の女と再婚すると思い悔しいです。どうすればいいでしょうか？