Но, увы, это было совсем не так. Детей в семье было много, три дочери (Лена, Соня, Варя) и три сына (Володя, Серёжа, Аркадий). Для дворян это время было временем вызова, только недавно, в 1861-м, отменили крепостное право, и помещикам приходилось очень непросто в новых экономических реалиях. Увы, глава семейства Василий Аркадьевич не был хорошим предпринимателем. Плюс имел грешок, любил играть в карты, только и здесь ему не везло. Довольно быстро всё приданое богатой супруги, 5 имений под Великим Новгородом, он пустил с молотка. Вместе с тем он был лёгким и обаятельным человеком. Его все любили, особенно родные дети.
Мать же была более строга и любви от детей получала меньше. Из-за разных характеров родители часто ссорились и в итоге разошлись, правда, официального развода так и не было. Забота о детях легла на плечи несчастной матери. Они перебрались в Петербург, где жили на съёмных квартирах. Мама стала ещё более мрачной, часто плакала, и это настроение передавалось чувствительному Серёже.