Семья Козловских не была богатой, и князю рано пришлось поступить на службу в Коллегию иностранных дел (так в то время именовался МИД). С 1802-го он состоял при русской миссии в Сардинском королевстве и с этого времени жил преимущественно в Европе. В 1804 г. в Риме Козловский под влиянием французского иезуита аббата Лами тайно перешел в католичество. Впрочем, на его дипломатической карьере это обстоятельство никак не отразилось – 22 сентября 1812 г. Козловский был назначен посланником России в Сардинии. В 1815 г. опытный дипломат принял участие в работе Венского конгресса, в частности, вел успешные переговоры по демаркации границ между Сардинией, Швейцарией и Францией. В 1816 г. Козловский отклонил предложенный ему пост посланника России в США, а два года спустя был назначен посланником в королевство Вюртемберг и Великое герцогство Баденское. Впрочем, его политику на этом посту сочли в Петербурге чересчур либеральной (читай: самостоятельной), и в 1821-м князь Петр Борисович вышел в отставку с годовой пенсией в 3500 рублей.
В течение 13 лет Козловский путешествовал по Европе. Он быстро сводил знакомства с самыми разными людьми. Этому способствовал как колоритный, невольно привлекавший внимание внешний облик русского дипломата – он был чрезвычайно тучен, румян, с приятным живым лицом, постоянно озаренным легкой любезной улыбкой, – так и его обширные познания в разных областях, от математики до поэзии Древнего Рима. Ум, остроумие, дар слова, редкое обаяние – по свидетельству знавших Козловского, его невозможно было не полюбить. От «русского европейца» были в восторге при французском и британском королевских дворах, с ним дружили столпы культурной Европы – Шатобриан, мадам де Сталь, Байрон (который упомянул Козловского в 7-й песне поэмы «Дон Жуан»), Гейне. В Оксфорде Козловский первым из русских был удостоен звания почетного доктора гражданского права. Время от времени он выступал в качестве публициста – напечатал за рубежом статьи «Некоторые статьи о греческом восстании и позиции России по отношению к нему» (1821), «Опыт истории России» (1820–1823), «Социальная диорама Парижа. Сочинение чужестранца, проведшего в этом городе зиму 1823 и часть 1824 года» (1825).
В 1826 г. воцарившийся в России Николай I потребовал от Козловского вернуться на Родину, на что князь Петр Борисович, чувствовавший себя в Европе как рыба в воде, ответил вежливым, но непреклонным отказом. Случай был исключительным: как-никак «невозвращенцем» становился не кто-нибудь, а дипломат в ранге посланника!.. Но международный скандал все же решили не раздувать, уж больно заметной и известной фигурой был Козловский. К тому же его многочисленные знакомства в европейском свете играли на руку внешней политике России – ведь князь создал и успешно поддерживал положительный образ русского за рубежом. Козловскому всего лишь сократили на полторы тысячи рублей пенсию.
Только осенью 1835 г. нужда пригнала князя Петра Борисовича в Россию. Но приезд на Родину вовсе не был покаянным. Князь мгновенно завоевал злоязычный петербургский свет и стал всеобщим кумиром. В светские салоны начали приглашать «на Козловского».
Правда, быт самого «льва сезона» часто изумлял даже его близких приятелей. По воспоминаниям поэта князя П.А. Вяземского, «мы тогда с Жуковским часто навещали его и заставали то в ванной, то на кровати. Несмотря на участие в его недугах, нельзя было без смеха видеть барахтавшуюся в воде эту огромную человеческую глыбу. Здесь можно кстати употребить это прилагательное – “огромное”, которое так часто и неуместно ныне у нас употребляется. Пред нами копошился морской тюлень допотопного размера. До цинизма доходящее неряшество обстановки комнаты его было изумительно. Тут уж не было ни малейшего следа, ни тени англомании. Он лежал в затасканном и засаленном халате; из-за распахнувшихся халата и сорочки выглядывала его жирная и дебелая грудь.