Он на много старше меня...

Весь сыр-бор заключается в том, что он старше меня на 40 лет.Мы уже 2 года живем вместе, но чем дальше-тем я все больше убеждаюсь, что не смогу иметь нормальную с ним семью.У него было 3 брака и в каждом по ребенку(общается со всеми)Меня в эти отношения не впутывает.Я очень хочу иметь свою семью, но не с ним. ..А уйти от него , бросить - не могу...люблю-не люблю, не знаю, но жаль его тоже(даже больше чем себя)Как?Через что и кого надо переступить, чтоб появилась определенность моей семейной жизни..?