Любимый коллега

Здравствуйте. Помогите разобраться в себе. Много лет проработали в одном офисе, я даже была замужем за коллегой. И вот, сейчас, поняла, что мужчина, с которым хотелось бы идти по жизни-совсем другой человек. Поняла это после командировки. С ним как "за каменной стеной", а мне этого так не хватает. Он женат, есть ребенок. Хотя и женат не официально и ребенок не его, дело не в штампах. Сам он практически ничего не делает, кроме легкого флирта. Оба раза секс был по моей инициативе. Понимаю, что с самого начала решение одно-забыть. Но! Мне то с ним хорошо. Я то искала именно такого мужчину. Почему я должна отказываться от своего счастья, пусть это будет эгоистично. Мы еще не разговаривали, я пока боюсь этого разговора, понимаю, что пока ничего хорошего не услышу, а я этого очень хочу. С другой стороны-дальше-больше влюбляюсь, нет гарантии, что я потом, когда совсем привыкну, услышу то что хочу. Как понять способен ли мужчина прийти ко мне навсегда или я просто "освежитель" его отношений? Заранее благодарю.