Толстой следил за тем, чтобы дети играли в активные игры на свежем воздухе. Важное значение придавалось «шведской гимнастике» по системе Пера Хенрика Линга. Летом играли в крокет. Обязательными были уроки верховой езды; становясь старше, дети принимали участие в охоте на вальдшнепов, зайцев и лис. Зимой ходили на лыжах и устраивали каток на большом пруду у въезда в имение. Для семилетнего Лёвы однажды это чуть не закончилось трагически. Он скользнул по тонкому льду над прорубью, лёд треснул, и мальчик оказался в воде. Он крепко держался за кромку, пока нескольким крестьянкам, полоскавшим белье в другой проруби, не удалось наконец его вытащить. После чего посиневшему, в промокшей ледяной шубе Лёве пришлось срочно возвращаться домой, где его встретили тревожными восклицаниями. «Не сердитесь на Анни!» – просил мальчик. Анни была его новой гувернанткой. Он согрелся только после растирания спиртом, после чего ему дали чаю и уложили в кровать.

Отец Лёвы по большей части занимался делами, закрывшись у себя в кабинете. То, что он писал, детей пока не интересовало. Счастьем было видеть, как родители играют в четыре руки на пианино. Но в их семейной жизни случались и настоящие бури. Лёля болезненно реагировал на любые конфликты между родителями. Став однажды свидетелем того, как отец громко отчитывал плачущую жену, мальчик ринулся вперед, прижался к матери и робко произнес: «Почему вы так плохо относитесь друг к другу? Нельзя быть плохим». Растроганный Толстой быстро успокоился: «Благословенны миротворцы!»

Лёля любил читать – сказки, стихи. В семье было принято читать вслух. Толстой любил Жюля Верна, в то время как гувернер Ниф предпочитал «Трех мушкетеров» Дюма. Иногда ездили в Тулу, ходили в театр, на концерты или выставки. Если дети вели себя хорошо, их поощряли таким «глупым удовольствием», как поход в цирк.

Все в семье танцевали, и сам Лёля был большим любителем вальса и мазурки. Но выше всего он ценил пьесы для фортепиано, русские романсы, церковные псалмы. Лёля любил петь. Он мог уйти в лес или лечь в кровать на спину и пропеть весь свой репертуар. Все дети играли на пианино. Раз в неделю к ним приезжал учитель из Тулы, а между этими уроками с ними занималась мать. Софья Андреевна была поражена успехами семилетнего Лёли. В одиннадцать лет он начал осваивать скрипку. Музыка, констатировал он, став взрослым, будила

Одно его раннее и драгоценное воспоминание связано именно с впечатлением от вокального исполнения. В гости к Толстым приехала молодая княгиня Шаховская, после ужина она пела под аккомпанемент пианино – веселые и грустные русские песни, французские бержеретки и современные романсы. Лёля был покорён и музыкой, и красотой исполнительницы. Он слушал, затаив дыхание, ему хотелось плакать и смеяться, он был готов броситься на шею княгине и признаться ей в любви. Он постепенно перемещался из дальнего угла, подходя к Шаховской все ближе и ближе. Пушкинский романс «Я вас люблю, хоть я бешусь», казалось, был обращен к нему лично. Певица заметила взгляды мальчика, прочла его мысли и улыбнулась. Когда пришло время прощаться, все столпились в прихожей. Лёля тоже попытался подойти к гостье как можно ближе, в отчаянии, что сейчас она уедет и увезет с собой все то, что в нем пробудила. Внезапно Шаховская оглянулась, наклонилась, поцеловала Лёлю и «горячо» сказала: «Молодой человек, вы покорили мое сердце». Это было выше его сил. Лёля бросился к себе в комнату, упал на кровать и разрыдался.