Мария Шульце, биограф королевы Марии, упоминает о рождественском посещении принцами других детей и добросердечности юного кронпринца Людвига: «…На Рождество оба принца приезжали в школу Макс-Йозеф-Штифт (Max-Joseph-Stift), чтобы готовиться к празднику с местными детьми, это было большой рождественской радостью. Оба обращались со всеми терками, ступками и другими атрибутами кукольной кухни настолько превосходно, что королева Мария решила доставить радость школьным детям. В первый день нового года она появилась с большим количеством прекрасных безделушек и устроила маленький розыгрыш. При этом принцы помогали, и кронпринц Людвиг доказал, что обладал добрым сердцем, когда сразу передал симпатичный флакон малышке, которая вытянула одного клоуна Хансвурста».

О добросердечности Людвига говорит еще другой случай, упоминаемый биографом Л.И. Кремером, когда в июне 1851 года маленький кронпринц с братом и родителями был в Байройте в замке Эрмитаж. За совместным обедом с родителями Людвиг обратил внимание на солдата на посту. Он спросил у отца, голоден ли солдат и мог ли он дать ему кусок мяса. Макс II возразил сыну, что солдат стоит на страже и не должен ни от кого ничто принимать. Ответ отца не удовлетворил Людвига, и он сказал, что в таком случае он может тихо подкрасться к охраннику и положить ему незаметно в карман еду. Кронпринцу разрешили так поступить в соглашении с флигель-адъютантом фон дер Таном. Позднее Отто подражал Людвигу, положив часовому целый торт.

О щедрости маленького Людвига передает Карола фон Ширндинг в своих воспоминаниях из институтских годов: «Однажды Людвиг обнаружил в маленькой капелле в конце сада Нимфенбурга фигурку воскового младенца Христа, который был уложен на соломе. Его брату Отто было откровенно жаль, что младенец Христос лежал на грубой подстилке. Людвиг подумал: „Мы можем помочь ему“. Осторожно он поднял младенца Христа и положил шелковый платок на сено. „Ткань новая“, – сказал он младенцу Христу и положил его сверху. Принц Отто указал, что дома спохватятся, если заметят отсутствие платка. Людвиг возразил ему: „Определенно нет, Отто, только побранят, если мы теряем что-то, то только из-за беспорядка. Однако этот платок послужит теперь более высокому господину, чем я, и я счастлив, что смог это сделать для него“».

Экс-король дедушка Людвиг и экс-королева бабушка Тереза с удовольствием по воскресеньям собирали всех детей во дворце Виттельсбахов. По воспоминаниям кузена Людвига, принца Леопольда, от бабушки дети получали картинки для раскрашивания и немного карманных денег, играли в башне с попугаями и парой обезьянок, подарком из Греции. Дедушка и бабушка сами лично обслуживали детей за столом, раздавая шоколадный напиток и кренделя, угощая бургерами и картофельным пирогом.

Таким образом, мы видим, что кронпринц Людвиг и его брат Отто с детства были окружены не только детскими товарищами по играм, но и взрослыми. Ранние утверждения, что баварские принцы ни с кем в детстве не дружили, не соответствуют действительности. И лишь только становясь взрослее, кронпринц Людвиг предпочитал все чаще оставаться наедине с самим собой, и общение с товарищами сокращалось.

Однажды теолог Игнац фон Дёллингер застал Людвига одного в затененной комнате, сидящего на диване. Он поинтересовался у кронпринца, не скучает ли тот, и предложил ему почитать, чтобы чем-то заняться. Людвиг ответил, что ему совсем не скучно и он себя так развлекает, выдумывая различные вещи.

Весну и лето Людвиг и его брат Отто проводили в замке Хоэншвангау, осень в замке Нимфенбург, а зиму в Мюнхенской резиденции. В замке Хоэншвангау Людвиг провел не только детство и юность, но и большую часть своей жизни. На первом этаже замка располагались апартаменты Марии, на втором – комнаты Максимилиана, а на третьем этаже детские комнаты. Живописная природа Альгойских Альп, горные ущелья, голубые озера Альпзее и Шванзее и изумрудный лес завораживали юного принца. Именно в Хоэншвангау зародилась любовь Людвига к природе, особенно к горам, и эта привязанность сохранилась на протяжении всей его жизни. Поэтому совсем неудивительно, что три его замка – Нойшванштайн, Линдерхоф и Херренхимзее – были построены в живописных уголках. Уже будучи королем, Людвиг выступал защитником окружающей среды.