Мать уехала неожиданно. Диана вспоминала позже, как на ее глазах мама села в машину, куда положили чемоданы, и больше не вернулась. Девочке было всего шесть лет, а брату три года. Они не понимали, что произошло, а никто не потрудился им разъяснить ситуацию. По словам матери, Джонни не впустил ее в дом, когда она приехала навестить детей. Для них долгое время мать оставалась предательницей, бросившей их на произвол судьбы. Старшие дочери уже проводили большую часть времени вне дома – в Англии издавна детей с младых ногтей отправляли в школы, где они не только учились, но и жили, лишь на выходные и каникулы возвращаясь домой.

«Сара была почти взрослой, ей исполнилось тринадцать, за ней тянулась отличница Джейн, они уже учились и чувствовали себя почти самостоятельными, – вспоминала Диана. – Казалось, развод родителей их почти не задел, они не желали ездить к маме в ее новый дом. Конечно, это только казалось, но старшие сестры хотя бы понимали, что именно происходило, а мы с братом нет».

Долгое время Диана считала, что мать их попросту бросила. Френсис брала детей на выходные, а в воскресенье возвращала дочь и сына в слезах обратно в Парк-Хаус. Диану в данной ситуации изводило многое. Она постоянно считала себя обязанной делать выбор между отцом и матерью. Известна история про то, как и мать и отец купили ей платья на выход, но девочка решила вовсе никуда не идти, не в силах отдать предпочтение одному из нарядов. Согласно воспоминаниям навещавших в ту пору Парк-Хаус гостей Диана выглядела вполне довольным жизнью ребенком. Внутреннее смятение копилось и практически никак не выплескивалось наружу, если не считать, конечно, отклонений в еде и слез по ночам.

После отъезда матери за детьми присматривали няни. Они сменялись с удручающей частотой и вели себя по-разному, порой обращаясь с ребятами жестоко: одна подсыпала им в еду слабительное, другая била Диану по голове ложкой, третья запирала их в комнате. Дети тоже не вели себя как ангелы, постоянно бунтуя против женщин, пытавшихся, по их мнению, заменить мать.

До девяти лет Диана училась в местной школе и имела возможность жить дома. Особых талантов в ней не отмечали. Она неплохо рисовала и любила заниматься спортом, но в изучении других предметов не блистала. Кроме того, брат утверждал, что Диана частенько говорила «не то чтобы неправду, но явно ощущала потребность приукрасить действительность». Между братом и сестрой отношения постепенно накалялись – они соперничали друг с другом, и Диана, будучи старше Чарльза на три года, в мелких потасовках одерживала верх, а он всегда с удовольствием слушал высказываемые Диане замечания и радовался, когда ее уличали во лжи…

Родители заваливали детей подарками, не пытаясь иначе решить возникшие в семье проблемы. В 1969 году ситуация немного улучшилась: в жизнь Дианы и Чарльза вошел отчим, Питер Шанд-Кид. Он быстро поладил с детьми, и визиты в новый дом матери стали приносить радость и удовольствие. Однако в то же самое время отец отправил Диану в другую школу, находившуюся вдали от дома. Девятилетняя девочка испытала очередной стресс, не понимая, зачем ее жизнь снова пытаются разрушить. Позже школа придется ей по душе, но вначале Диана восприняла перемену как наказание. В день отъезда «девочка испуганно прижимала к груди плюшевого зеленого бегемота (воспитанницам разрешалось брать с собой в постель только одну мягкую игрушку), а в другой руке держала клетку с морской свинкой». Отец тот день называет кошмарным – собственный ребенок казался ему сиротливым и глубоко несчастным.