Отец Виталий происходил из семьи белорусских крестьян. Он родился 18 января 1916 года, в крещенский сочельник, в белорусском селе Нестеровка, сейчас это Витебская область. Его родители Михаил и Христина были простыми крестьянами, не имевшими никакого образования и занимавшимися простым крестьянским трудом. Отец умер рано и поэтому воспитанием детей – Виталия и его старшего брата Михаила – занималась мама. Отец Виталий очень любил свою мать и почитал её до конца жизни, называл её «бедной, безграмотной святой». Именно она, будучи глубоко верующим человеком, сумела передать веру своему сыну.
Нужно сказать, что Виталий с детских лет проявил ярко выраженную склонность к учению и блестящие способности. В 1929 году после окончания семиклассной народной польской школы Виталий Боровой поступает в Виленскую Духовную семинарию, которую заканчивает не просто первым учеником класса, а учеником высшей категории. Его аттестат зрелости давал ему право поступления на любой факультет любого высшего учебного заведения Польши. Причём его успеваемость, также как в своё время успеваемость профессора В. В. Болотова, была оценена над принятой тогда нумерацией. Известно, что при оглашении разрядного списка выпускников ректор семинарии сказал, что в начале списка нужно было бы назвать фамилию Борового, затем подвести черту и только после этого уже перечислять по разрядам остальных выпускников.
В 1936 году Виталий Боровой становится студентом богословского факультета Варшавского университета. Вспоминая о том времени, о. Виталий рассказывал, что во время учёбы в Виленской семинарии он стал большим русским патриотом. Так, при поступлении в университет в графе анкеты «национальность» он написал «русский», хотя знал о враждебном отношении польских властей ко всякому проявлению русскости. Этот свой поступок он мотивировал тем, что не приемлет политики властей, направленной на разделение исторически единых народов – русских и белорусов. В результате он не стал университетским стипендиатом, которым вполне мог бы оказаться по факту блестящего окончания семинарии. Нужно сказать, что условия, в которых жили православные духовные школы в Польше в предвоенный период, были непростыми, правительство активно проводило политику полонизации вплоть до полного запрещения вести обучение на русском языке, проводились «кадровые чистки». Все кадровые назначения в университете должны были согласовываться с Министерством вероисповеданий и общественного просвещения. Тем не менее, как вспоминал о. Виталий, состав профессоров на богословском факультете в период его обучения в университете, ещё оставался достаточно сильным. Это были в основном эмигранты из России, продолжавшие в своём преподавании традицию русской богословской школы. Отец Виталий с гордостью говорил о том, что учился у таких замечательных учёных, как, например, историк, правовед и публицист Михаил Валерианович Зызыкин, патролог архимандрит Григорий (Перадзе), мученически погибший в годы Второй мировой войны в Освенциме и причисленный Грузинской православной церковью к лику святых. Человеком, который оказал особое влияние на Виталия Борового, был профессор университета, богослов, философ, историк русской духовной культуры Николай Сергеевич Арсеньев. Он с 1927 года принимал участие в экуменическом движении, и, очевидно, от своего учителя будущий о. Виталий воспринял интерес к вопросам христианского единства, экуменического движения и участия русских богословов в нём. Надо сказать, что в университете сформировались и научные предпочтения Виталия Борового, который желал стать византологом и изучать историю тем же методом, что и профессор В. В. Болотов, которого он всю жизнь считал своим научным кумиром.