Людвиг, как старший ребенок и как наследник престола, чувствовал свое превосходство над младшим братом и этим пользовался в детских играх, желая быть всегда лидером. Любезный Отто уступал настроениям старшего брата, но иногда по-детски протестовал, требуя и себе преимуществ. В общественности не замечали детских разногласий между братьями, когда они с матерью гуляли по улицам Мюнхена или когда гармоничную семью видели из окон Мюнхенской резиденции. В основном, конечно, отношения двух братьев оставались даже спустя много лет добрыми и дружескими. Людвиг всегда испытывал к Отто теплые чувства.

Бросались в глаза внешнее различие, как и характеры обоих принцев. Худощавый, хрупкий, долговязый Людвиг с темными волосами и сияющими синими глазами, в то время как у кареглазого белокурого Отто было коренастое, крепкое телосложение. Родители определили для каждого из детей любимый цвет: для Отто красный, а для Людвига синий. В соответствии с этими цветовыми предпочтениями подбиралась для них одежда, школьные принадлежности, книги, мелкие декоративные предметы. Став взрослым, Людвиг сохранит свое предпочтение к синему цвету.

Любящий уединенность, застенчивый, серьезный, сдержанный Людвиг с романтическим и мечтательным характером был противоположностью отрытому, общительному, подвижному реалисту Отто. Порой оба мальчика проявляли нерешительность, и, чтобы дети не росли изолированно от других детей, а становились более уверенными в себе, родители и воспитатели поощряли детские игры в войну и солдатиков, приглашали в гости к обоим принцам других детей для совместных игр. К числу их товарищей по играм относились сыновья принца Луитпольда кузены Людвиг и Леопольд, дети герцога Макса Баварского из Поссенхофена, принцы Гессенские и троюродный брат граф Максимилиан фон Хольнштайн. Вся застенчивость Людвига и Отто улетучивалась, когда они играли с детьми герцога Макса, иногда к веселым играм присоединялась и королева Мария.

Герцог Макс Баварский (1808–1888) принадлежал к линии неправящих Виттельсбахов, герцогов in Bayern. В браке с принцессой Людовикой Баварской (1808–1892), дочерью короля Максимилиана I, у герцога Макса родилось восемь детей: Людвиг Вильгельм (1831–1920), Елена Каролина Тереза (1834–1890), Елизавета Амалия Евгения (Сиси) (1837–1898), Карл Теодор (1839–1909), Мария София Амалия (1841–1925), Матильда Людовика (1843–1925), София Шарлотта Августа (1847–1897), Максимилиан Эмануэль (1849–1893).

Игры принцев с сыновьями Луитпольда не всегда были мирными, уже с самого малого постепенно развивалось соперничество между Людвигом и его кузеном-тезкой, которое лишь с годами усилится. Те гости, кто вел себя невежливо по отношению к принцам, больше не допускались на следующее приглашение, как было с графом Тони Арко, который однажды дал пощечину Людвигу.

Дети простых придворных были также приятелями по детским играм у юных принцев. С сыном медика фон Гитля Людвиг играл в церемонию рыцарства, при этом брал у своей няни Сибиллы синюю накидку, и она служила ему в игре рыцарской мантией. Также Хелена, дочь историка и государственного деятеля Вильгельма фон Дённигеса, часто присоединялась к играм с Людвигом. В своих мемуарах она вспоминала о тех безоблачных днях детства: о фантастических играх в эльфов, когда гардины и портьеры становились цветами и одеждой, в которые дети закутывались. Хелена упоминала также об играх в плевки, о детских перебранках и потасовках, в которых Людвиг вырвал клок ее волос, о том, как они ломали игрушки, откручивая оловянным солдатикам головы.