Две женщины параллельно

Здравствуйте, помогите, пожалуйста разобраться в сложных отношениях. Познакомилась с мужчиной на сайте знакомств, он разведен, начали встречаться. Говорил, что хочет, чт обы у нас было серьезно. Потом узнала от него же, что у него есть девушка, но уних сложные отношения и он искал параллельно другую, так как не был уверен в той. Изначально я не знала про эту девушку, он все время был со мной, живет он один. Потом он признался мне, что его к ней тянет, и я нравлюсь, и она. Я случайно прочитала их переписку, он писал, что любит ее. Я много раз ему говорила, что меня не устраивает такая ситуация, а сама все равно продолжаю с ним отношения. Подскажите, как мне быть. Я понимаю, что должна его бросить, но не могу. Может, потому что полюбила или боюсь одиночества. Мне 45 лет, я разведена, детей. Как мне все это прекратить, когда он говорит мне, что встречается с ней, а мне от этого очень плохо?