Как построить семью?

Здравствуйте,меня зовут Виктория.мне 19 лет.у меня вот какая ситуация.я встречаюсь с парнем уже второй год.он уже был женат и от первого брака у него есть дочь которой три года.в начале наших с ним отношений дочь проживала с матерью но мой молодой человек подал в суд и в итоге по решению суда в данный момент дочь проживает с ним у его родителей.отдельного жилья у него нет,я приезжаю к нему по выходным когда мы вместе всё замечательно я помогаю его родителям с мамой его я очень быстро сдружилась и с ребёнком его занимаюсь.но дело в том что время то идёт а ситуация не меняется.я говорю о том что хочу свою семью хочу детей он постоянно отвечает что нужно подождать.и уже не знаю что и думать либо он просто боится создать новую семью и отношения на выходные его устраивают либо он просто не хочет со мной жить.а после того как дочь с ним стала жить совсем перестал уделять мне время.весь в делах в заботах.и как же мне его понять?да ещё и бывшая жена не оставляет нас в покое да и не оставит не когда.пишет звонит угрожает и мне и моему парню.и по судам всё бегают.и неужели так будет всю жизнь.что он так вцепился в ребёнка она же мать пусть и воспитывает надо же и о будущем думать а он бегает с бумагами по судам совсем со мной не считаясь.что же мне делать.помогите.