Для тебя очень важно, чтобы сын рос с тобой. Ты об этом сказал. Важнее ли это того, что твой любовница рано или поздно уйдет, решать тебе. А может, она еще долго не уйдет. А может, тебе надоест она раньше. Кроме того, обдумывая вариант того, чтобы оставить жену и уйти к любовнице, помни, что отношения с ней сейчас как с любовницей и потенциальные отношения с ней в статусе основной женщины это большая разница и далеко не факт, что они будут такими же привлекательными для тебя.
По поводу твоих отношений с женой. Если "чтобы у ребенка был отец" единственная причина для сохранения отношений с женой, то стоит подумать над этим. Не очевидно, что для ребенка лучше: жить в полной семье, в которой родители вместе из чувства долга (а дети такие вещи чувствуют очень тонко) или жить с мамой, но видеть, что родители честны по отношению к самим себе и друг другу. И ты вообще не обязан приносить себя в жертву ради сына. Тем более, что у тебя есть всегда возможность участвовать в жизни сына и помогать ему, не живя с его мамой.