Для России это не совсем привычный вариант, когда дети остаются с отцом, но за границей это практикуется гораздо чаще. Отец имеет такие же права на детей, как и мать. Сейчас Вы разрываетесь, живя на две семьи. Если Вы позволите бывшему мужу устроить свою личную жизнь, то ситуация разрешится быстрее. Сейчас бывший муж посвящает себя детям, давая Вам возможность строить свою жизнь, потом вы могли бы поменяться ролями. В Вашей квартире новый муж, скорее всего, не будет чувствовать себя хозяином, ему важно построить что-то свое, чем вы и занимаетесь.
Сейчас дети на стороне отца, им трудно понять взрослые отношения, что Вы взяли на себя ответственность развязать этот узел и освободить себя и бывшего мужа. Детям сейчас спокойно и стабильно с отцом. Вам не обязательно продолжать играть роль хозяйки в этом доме, ведь теперь у Вас есть другая семья. Вы можете просто встречаться, общаться с детьми и помочь мужу, нанять, например, домохозяйку.