О том, что Сталин и его жена были разными по характеру людьми, свидетельствует и Б. Бажанов: «Надя ни в чем не была похожа на Сталина. Она была очень хорошим, порядочным и честным человеком. Она не была красива, но у нее было милое, открытое и симпатичное лицо…
…Когда я познакомился с Надей, у меня было впечатление, что вокруг нее какая-то пустота — женщин-подруг у нее в это время как-то не было, а мужская публика боялась к ней приближаться — вдруг Сталин заподозрит, что ухаживают за его женой, — сживет со свету. У меня было явное ощущение, что жена почти диктатора нуждается в самых простых человеческих отношениях…
…Домашняя ее жизнь была трудна. Дома Сталин был тиран. Постоянно сдерживая себя в деловых отношениях с людьми, он не церемонился с домашними. Не раз Надя говорила мне, вздыхая: «Третий день молчит, ни с кем не разговаривает и не отвечает, когда к нему обращаются; необычайно тяжелый человек». Но разговоров о Сталине я старался избегать — я уже представлял себе, что такое Сталин, бедная Надя только начинала, видимо, открывать его аморальность и бесчеловечность и не хотела сама верить в эти открытия».
Личная жизнь, это, конечно же, в первую очередь семья. Очевидно, вскоре после переезда в Москву Надежда поняла, что в жизни мужа ей отведено до обидного мало места. Ни с ней, ни с детьми ему некогда было общаться. А у них в кремлевской квартире, а потом и на даче, всегда было полно народу — родственники, друзья, знакомые. Комнаты звенели детским смехом — к Василию и Светлане приходило много маленьких гостей из соседних квартир.
В 1919 году семье Сталина выделили дачу в Зубалове. В 1932 году, после кончины жены, он переменил квартиру в Кремле и построил новую дачу в Кунцеве. Дом в Зубалове не строили по индивидуальному проекту, тогда еще так не делали, это пришло с годами. Просто воспользовались брошенной усадьбой, благо их тогда в Подмосковье пустовало много. Усадьба называлась по имени бывшего хозяина — нефтепромышленника Зубалова, владевшего нефтеперегонными заводами в Баку и в Батуми. Здесь же, неподалеку, поселились А. И. Микоян, К. Е. Ворошилов, Б. М. Шапошников.
Надежда Сергеевна работала, с детьми занималась няня, но по вечерам и в выходные дни мать старалась уделять как можно больше внимания сыну и дочери. До 1929–1930 годов, по воспоминаниям Светланы Аллилуевой, мать сама вела хозяйство, получала пайки и карточки, и ни о какой прислуге не могло быть и речи. Во всяком случае, в доме был нормальный быт, которым руководила хозяйка дома, и никаких признаков присутствия в доме чекистов, охраны тогда еще не было. Единственный охранявший ездил со Сталиным только в машине и к дому никакого отношения не имел, да и не подпускался близко. Более того, Сталин в то время ходил по московским улицам без всякой охраны, как обыкновенный человек.
Летом в Зубалове всегда было людно. Здесь часто живал Бухарин, наполнявший весь дом животными, которых очень любил. Он играл с детьми, учил няню ездить на велосипеде и стрелять из духового ружья. Надолго приезжал Г. К. Орджоникидзе, который очень дружил со Сталиным. Близкими подругами были их жены. Появлялся Буденный с гармошкой, под которую любил петь Ворошилов. Изредка подтягивал и хозяин, у него, оказывается, был высокий и чистый голос, хотя говорил он, наоборот, глуховато и негромко.
Признанной главой дома была хозяйка. Ей одной удавалось объединить и как-то сдружить между собой всех разношерстных и разнохарактерных родственников. Многие знавшие ее люди отмечают, что наряду с привлекательностью, умом, необыкновенной деликатностью она обладала большой твердостью, упорством и требовательностью в том, что ей казалось непреложным. Подчеркивая независимость ее характера, приводят такой пример: в 1927 году, во время ожесточенной борьбы Сталина с Троцким, когда Троцкий и Зиновьев были исключены из партии и покончил с собой их видный сторонник дипломат А. А. Иоффе, на похоронах за его гробом в числе провожавших в последний путь шла Надежда Аллилуева.
Родственников у Надежды Сергеевны было много, и они не обделяли ее своим вниманием. Объявив себя мужем и женой, супружеская пара перевезла в Москву родителей Надежды. Сергей Яковлевич и Ольга Евгеньевна Аллилуевы жили в кремлевской квартире Сталина, на лето перебирались в Зубалово. После смерти Надежды в 1932 году Сергей Яковлевич сник, совершенно ушел в себя, подолгу не выходил из своей комнаты. Жил попеременно то в Зубалове, то у старшей дочери Анны. Потом засел за воспоминания, которые вышли в 1946 году. Напечатанными он их так и не увидел — умер в 1945 году почти в восьмидесятилетнем возрасте. В отличие от сдержанного, деликатного супруга, Ольга Евгеньевна была натурой темпераментной, влезала во все бытовые мелочи, бурно выражала свой восторг и свое недовольство. Умерла она в 1951 году от стенокардического спазма, было ей 76 лет. После неожиданной кончины младшей дочери старики жили порознь, и каждый встретил свой смертный час отдельно друг от друга. Так же стоически переносили они удары, валившиеся на семью один за другим.
Удары обрушивались с сатанинской методичностью, как будто кто-то специально задался целью вырвать этот большой и крепкий род с корнями. Чудовищный замысел начался с уничтожения молодых побегов семейного древа Аллилуевых. После трагической кончины Надежды рок указал кровавым перстом на ее старшего брата Павла и его жену Евгению Александровну. Павел Сергеевич, похожий на младшую сестру и внешне, и внутренне, только, пожалуй, более мягкий и податливый, стал, как ни странно, профессиональным военным. Не он выбирал профессию — она его выбрала. Началась революция, гражданская война, и он взял в руки оружие. Воевал под Архангельском, в Туркестане.
После окончания гражданской войны по указанию Ленина его послали с экспедицией Урванцева на Крайний Север — искать руду, уголь. Он не принадлежал к числу ученых, он обеспечивал их безопасность. На реке Норилке экспедиция обнаружила огромнейшие запасы каменного угля и железной руды. Павел Аллилуев вместе с Урванцевым забивали первые колышки в основание будущего города Норильска. В конце двадцатых годов он с семьей уехал в Германию в качестве военпреда. Вернувшись в Москву, создавал Бронетанковое управление. В 1938 году, выйдя на работу после очередного отпуска, он не узнал своего управления: в его отсутствие арестам подверглась большая половина сотрудников. Служебные помещения опечатаны, в коридорах зловещая тишина. Генералу Аллилуеву стало плохо, и он умер в своем кабинете от сердечного спазма. Через десять лет, в 1943 году, эту внезапную смерть вспомнит Берия и использует ее против вдовы Павла Аллилуева Евгении Александровны. Ей предъявят обвинение в отравлении мужа и запрячут на десять лет в одиночку, откуда ее освободит 1954 год.
Не менее трагична и судьба старшей сестры Анны. Как и Надежда, она рано вышла замуж. Ее супругом был Станислав Францевич Реденс — польский большевик, давний сподвижник Дзержинского. Реденс работал в ЧК на Украине, в Грузии. В Тбилиси он повстречался с Берией и сразу не понравился ему. Лаврентий Павлович сделал все возможное, чтобы выжить Реденса из Грузии. Был найден благовидный предлог — перевод в московскую ЧК. На первых выборах в Верховный Совет СССР в 1936 году Реденса избирают депутатом. Но в 1938 году в Москве появляется Берия. Реденса сразу же откомандировали в Казахстан, и он с семьей переехал в Алма-Ату. Пробыл там недолго — вскоре его вызвали в Москву. Ехал с тяжелым чувством. Оно оправдалось — к семье он уже не вернулся.
Его жена с детьми переехала в Москву. Анна Сергеевна ни на минуту не поверила, что ее муж — «враг народа». Еще был жив Павел, который пытался вступиться за Реденса, даже поссорился на этой почве со Сталиным, но тот был непреклонен. Как пишет Светлана Аллилуева, отец не терпел, когда вмешивались в его оценки людей. Если он выбрасывал кого-либо, давно знакомого ему, из своего сердца, если он переводил в своей душе этого человека в разряд «врагов», то невозможно было заводить с ним разговор об этом человеке. Сделать «обратный перевод» его из врагов, из мнимых врагов, назад — он был не в состоянии, и только бесился от подобных попыток. Ни Павел Аллилуев, ни Алеша Сванидзе не могли тут ничего поделать, и единственное, чего они добивались, это потери контакта со Сталиным, утраты его доверия. Он расставался с каждым из них, повидав их в последний раз, как с потенциальными собственными недругами, то есть как с врагами.