Как понять: нужно ли сохранять отношения?

Добрый день, мне 31 год, мы с мужем живем в гражданском браке 3 года, детей от брака нет, это мой второй брак. От первого у меня 2 детей. После развода с первым мужем, мне очень хотелось обрести настоящую семью, и вот случилось. По началу все было хорошо, но потом спустя около 1 года, начинались ссоры на пустом месте, постоянные хлопанье дверью, пропадания ночью, я конечно все терпела пытаясь все оправдать и понять. В результате он ушел, забрав вещи. Спустя время, когда узнал, что я общаюсь с другим человеком пытается вернуться, но я не знаю как поступить? Пожалуйста, помогите разобраться.