Отношения с разведенным мужчиной

Здравствуйте, Помогите пожалуйста понять стоит ли мне рассчитывать на серьезные отношения с разведенным мужчиной? Я сама разведена. С бывшим мужем прожили в браке 7 лет и развелись 3 года назад. От первого брака есть дочь. Мой мужчина младше меня на 4 года, он тоже разведен, в браке с бывшей женой прожили 4 года и уже 4 с половиной года разведены. От брака у него тоже есть дочь которую он очень любит. Когда мы вместе он постоянно про нее говорит и рассказывает про бывшую жену. Я не понимаю какое вообще место я занимаю в его жизни. Мы с ним работаем в одной организации и как то я на него внимания особо не обращала раньше. Но он в какой то момент сам начал оказывать мне знаки внимания. На протяжении нескольких месяцев я не обращала особого внимания. Он периодически мне звонил искал предлоги приехать ко мне но я отказывалась. Потом совсем недавно у нас начались отношения. Но он ведет себя как то двухсмысленно. То говорит что очень любит, а на следующий день он как будто стесняется меня. Заметила так же что он почти никогда не смотрит мне в глаза а если и посмотрит то тут же отводит взгляд. С каждой нашей встречей я вижу что он открывается понемногу. Начал рассказывать о прошлой жизни говорил что я по сравнению с его бывшей женой ангел но про нее никогда плохо не говорил. Наоборот все ее плюсы рассказывал. Но когда я спросила вернулся бы ты назад в семью в первый раз он ответил что взвесил бы все за и против а второй раз сказал что вернулся. Не понимаю тогда зачем ко мне он приходит и звонит. При последней нашей встречи он сказал что у нас не отношения а просто встречи. Может он боится серьезных отношений? Хотя я ему говорила сразу что я хочу именно серьезных отношений и семью. И еще не могу понять один его поступок: при нашем общении он всегда выключает телефон. Говорит что не хочет чтобы мешали. Может кто то у него есть? Последний раз когда он у меня был ему позвонила его бывшая теща (он в очень хороших отношениях с ней) и позвала в гости где была его бывшая жена и дочь но он остался со мной. Помогите пожалуйста понять его и очень прошу подскажите как вести себя с ним?