Не могу отпустить

С мужем развелись 15 лет назад, но продалжали жить гостинничным браком, т.е. он приходил ко мне и сыну (16 лет) на праздники и выходные.Два года назад он заявил, что встетил женщину и собирается с ней строить серьезные отношения. Видно там что-то не получилось и он снова стал приходить к нам. И в тоже время какие-то отношения у него есть на стороне. Я хочу ему сказать хватит меня мучать и в то же время боюсь, что он уйдет и больше не придет. Головой я понимаю, что это замкнутый круг, что он живет на две семьи, но ничего поделать с этим не могу. Помогите.