Как не потерять семью

Здравствуйте, незнаю уже куда обращаться, надеюсь вы мне поможете. Ситуация следующая, прожили с мужем в браке 6 лет, есть дочь 4 года, в силу того что мы разные люди, стали ссорится, в этот момент на горизонте появился мой бывший молодой человек, моя первая любовь. Все закрутилось, и я приняла решение разойтись с мужем. Развелись, и сразу начались отношения с бывшим, расскажу о нем: женат не был, но жил с женщиной 11 лет, есть дочь 7 лет, она ему изменяла не раз, в последний раз ушла сама к другому мужчине, это и явилось причиной их расставания. На момент нашего общения, они не жили уже год. Прошло 3 месяца, я забеременела, решили поженится. Вот 2 недели назад как была свадьба, суть проблемы в том что его бывшую бросил мужик к которому она ушла, и мой уже муж начал ей помогать, то отвезти, то привезти, то у дочери срочные проблемы, мало того, стал настаивать о приходе его дочери в мой дом(живём у меня). Я не против встреч с ребёнком, но не на моей территории, в связи с этим начались скандалы, муж стал меня сторонится, дуется, мне нельзя нервничать тк нахожусь в положении, как мне выстроить семейные отношения? Подскажите, помогите! Как не потерять семью