Что делать, разрываясь между семьей и любимым?

Здравствуйте! Так сложилось у меня в жизни, что я вышла замуж, уже на 6 месяце беременности. Прожив с мужем месяц после свадьбы в один день он уехал по делам и не вернулся так как его задержала милиция. Оказалось, что он когда-то занял у знакомых 5000$ и не смог вернуть. На него написали заявление и обвинили в мошенничестве. После его задержания меня забрали родители и я стала снова жить с ними. Сейчас он уже почти 5 месяцев отсидел. Ему дали 4 года общего режима. В мае я родила сына, записала на себя, отца не указывала, чтобы в дальнейшем судимость отца не повлияла на карьеру нашего сына. Этого человека я очень люблю. Я понимаю, что конечно брать деньги взаймы не расчитав своих возможностей - это очень безответственно, но я хочу и дальше любить, жить и быть с этим человеком. Проблема в моих родителях, близких. Они в ем разочаровались, перестали уважать. И вообще все говорят, что он непорядочный и очень плохой человек и не достоин ни меня ни сына... Мне очень больно и обидно от таких высказываний... Все надеятся на то, что я найду другого и начну новую жизнь. Если получиться выйти условно досрочно, то в следующем году он уже будет на свободе. Подскажите пожалуйста как мне быть.