Адаптация в саду в 4,9 лет

Здравствуйте, необходим совет по поводу адаптации в детском саду. Ребенок рожден зимой, поэтому в сад попал в 3,8 (год назад). На тот момент все было отлично, в сад хотел и ходил. Но, начал болеть, сам выздоравливал нормально, а вот его младший брат (на тот момент 1,8) болел сильно. Из-за этого старший весь год в сад не ходил. В этом году решили начать опять ходить. Он сначала хотел. Пошли в сад. Думала сразу, на весь день. Ан нет. Наша ошибка - в первый день на утренней прогулке он увидел меня и родных (его маму, папу, братика и дедушку) гуляющими, и в слезах подбежал к забору со словами, что ему не весело, что хочет уйти. На сегодняшний день ходим 3ю неделю (не полную, болели, пропускали). И он так и не хочет идти. Говорит разное - то дети игрушками не делятся, то просит забрать до дневного сна (воспитатели говорят, что это основная проблема - ложиться не хочет), а чаще всего говорит, что "полюбил" маму, хочет быть со мной. И никакие обоснования, уговоры, объяснения, что в сад ходят все, что младший брат тоже скоро пойдет, что маме надо на работу - не помогают. Вчера с вечера договорились, что пойдет, 2 дня и выходные, а утром опять слезы дома, по дороге, в раздевалке. Что я делаю не так? Я с январая работаю дома, удаленно, и очень много времени за компьютером. Может ему правда меня не хватает. В общем, как быть - водить, или бросать сад, раз он каждый день в слезах до дрожи. Должна добавить, что я, конечно, бывает, что ругаюсь, кричу, холерик одним словом. А он чувствительный, плакать может начать уже как только что-то натворит, еще даже не зная, будут ли его ругать. Ремень в воспитании очень редко, только когда реально надо, чтобы запомнил (за все время раза 3). Еще боюсь возможных нервных последствий (читала про энурез, тики и пр. На почве сада). Как это предотвратить? Сумбурно, но надеюсь суть ясна. Заранее спасибо за ответ.