Сталин жил в старинном Потешном дворце, четырехэтажном здании, построенном в 1652 году. Некоторое время дворец выполнял функцию увеселительного заведения – в нем размещался театр, где давали комические представления, пока в девятнадцатом веке там не разместилась царская тайная полиция. В Потешном дворце сохранились изящные театральные люстры и покрытая ковром лестница, по которой Сталин поднимался в свою мрачную и унылую квартиру с высокими потолками, расположенную на втором этаже.
Светлана так вспоминала эту квартиру: «Там была комната для гувернантки, а также столовая, достаточно большая, чтобы в ней поместился рояль. Также была библиотека, комната Нади и маленькая спальня Сталина, где стоял стол с несколькими телефонами». В квартире было две детских комнаты (Светлана делила свою с няней), кухня, комната домоправительницы и две ванных комнаты. Все помещения отапливались дровяными печами. По описанию Светланы, «квартира была скромная, с солидной буржуазной мебелью». Семьи других большевистских лидеров жили напротив, в Кавалерском корпусе, они часто бывали в квартире Сталина.
В соответствии с партийной идеологией никакой частной собственности не могло быть. Все принадлежало государству, вплоть до посуды и столового серебра. Это, в конечном счете, означало, что любую вещь можно присвоить себе. В первые годы после революции даже члены партии получали продуктовые карточки, но только гипотетически. В стране, где население голодало, вполне хватало продуктов для кремлевских вечеринок партийной элиты. Все большевистские лидеры получили государственные дачи, покинутые своими бывшими владельцами – аристократами и дворянами, спасавшимися бегством после 1917 года.
Светлана родилась 28 февраля 1926 года. В это время сталинская квартира уже была достаточно густо населена. Пятью годами ранее, 21 марта 1921 года, родился ее старший брат Василий. Ходили слухи, что Надежда, демонстрируя большевистскую скромность и несгибаемость, отправилась в родильный дом пешком. Когда сын появился на свет, она позвонила домой, чтобы сообщить Сталину о рождении сына. Также с 1921 года в квартире жил и сводный брат Светланы Яков Джугашвили, сын Сталина от первого брака. Он был старше ее на девятнадцать лет и был любимцем Светланы до самой своей смерти в фашистском лагере.
Жизнь семьи во многом напоминала уклад чеховских семей. В кремлевской квартире то и дело появлялись различные родственники. В семье существовало две ветви: Аллилуевы и Сванидзе. Аллилуевы бывали у Сталиных очень часто. На тот момент их ветвь состояла из Надиных родителей Ольги и Сергея, ее братьев Федора и Павла, жены Павла Евгении (Жени) и сестры Анны, которая была замужем за Станиславом Реденсом. Всем членам этой семьи были уготованы трагические роли в сталинской драме.
Семья Сванидзе приехала из Грузии в 1921 году, для Сталина они были словно тени его прошлой жизни. В 1906 году грузинский революционер Иосиф Джугашвили, более известный под кличкой Сосо, женился на сестре школьного товарища Александра Сванидзе, в революционном подполье носящего прозвище «Алеша». В те дни, когда успех большевистской борьбы казался далеким и почти недостижимым, три сестры Сванидзе работали в модном ателье в Тифлисе. В приемных этого ателье всегда было много дворян, генералов и полицейских офицеров. Пока сестры примеряли платья генеральской жене, в соседней комнате подпольщики обсуждали свои революционные планы и прятали листовки среди изящных манекенов.
Младшая из трех сестер, изысканная красотка Екатерина Сванидзе, которую все называли Като, влюбилась в таинственного и остроумного товарища Сосо. К тому времени он уже был главой партийной ячейки в Тифлисе, поэтому ничего удивительного, что царская полиция часто наносила визиты в его дом. Через несколько месяцев после свадьбы Като забеременела и в марте 1907 года родила сына Якова. Вскоре она заразилась тифом. Всего в двадцать два года Като умерла на руках своего возлюбленного Сосо. Это случилось двадцать второго ноября 1907 года. Во время похорон вдовец в отчаянии бросался на гроб, а потом на два месяца исчез из Тифлиса.