Сохранившиеся письма Петра Александровича к Н. Н. Муравьеву-Карскому охватывают 30-летний период. Они так часты и так подробны, что позволяют в деталях проследить его жизненный путь, его участие в сражениях и смотрах, взаимоотношения с известными в нашей истории людьми, имена которых мелькают в его письмах, его личные радости и горести. К числу последних относится история его женитьбы, о которой очень мало знали даже его родные. 19 января 1841 г. он пишет Николаю Николаевичу: «Вы не ожидаете известия, которое несет Вам это письмо. Радость моя не может не быть услышана Вами без удовольствия, за это участие ручается мне сердце мое. Ваш Брянчанинов сосватался и, если Бог поможет, на днях будет играть свадьбу. Ольга Сергеевна Левшина, моя невеста, приезжала с отцом своим, уволенным от службы Артиллерии полковником, повидаться с дядей своим, нашим Левшиным, во время квартирования последнего в Алешнах. Как ближайший сосед, тогда я часто бывал там и, найдя в девушке наружность приятную, образование равное с моим, ум живой и, что дороже всего, твердые правила Православного исповедания, решился, помолясь, сделать предложение, принятое дочерью и утвержденное отцом».
В этот же день он пишет жене Николая Николаевича, Наталье Григорьевне: «…Я не останавливаюсь сделать Вам краткий очерк девушки, в которой сосредоточены теперь все мои надежды счастия, все ожидания мои. Ольга Сергеевна Левшина имеет от роду 20 лет, росту маленького, брюнетка, прекрасные глаза, лоб большой и римский нос; она не красавица, но для меня мила и даже кажется прехорошенькая, манеры не вычурные и вообще обращение простое, благородное…»
Через год у них родилась дочь Мария, но прожила она всего полгода. Еще через полтора года родился сын Алексей: «Жена у меня такая домоседка, что никуда, кормит сына и тем только и тешится».
Их брак длился менее пяти лет; 15 декабря 1845 г. Петр Александрович пишет: «…до сего времени не могу сам верить случившемуся, не могу вспомнить происшедшего в этот, по счислению человеческому, короткий срок; я — вдовец с двумя малолетками, из которых последнему 9 месяцев. Ольга кормила его последний раз 20-го ноября, за 5 дней до смерти, случившейся 26-го ноября в 6-м часу утра… потеря невозвратимая и неожиданная; …умерла сном праведной, в воздаяние ее лишений и трудов, понесенных при кормлении детей, ей было 25 лет! …я бежал из деревни».
Но беды продолжали преследовать Петра Александровича: «…Давно я получил письмо Ваше, — пишет он 27 марта 1846 г. из Ново-Георгиевска, — и до сих пор не отвечал, потому что, по пословице русской, беда не ходит одна, всегда сам третий.
В день получения письма Вашего я получил уведомление, что младший сын мой при смерти, на другой день весть о его кончине; разумеется, я бросил все и поехал взглянуть на умершего и взять к себе оставшегося.
Третья моя беда — прием округа поселенного; Вы знаете поселения по слухам, по взгляду на них; но надобно видеть очень близко, чтоб убедиться в горьком положении этих тружеников земледельцев. Вообразите огромнейшее имение из 100 душ, в котором под влиянием прихотливого произвола главноуправляющего все прикащики тщатся наружным видом прикрыть внутреннее неустройство.
Не будь Лауница, Николай Николаевич, я бы не мог оставаться, да и теперь еще не уверен. Варпаховский (к которому я попал под команду) вороват и словом и делом, и возненавидел меня, старается выставить меня как человека дерзкого, а дерзость моя только правда. Все новейшие теории применяются к военному поселению, а хлеба мало. А главная беда постройки экономические, они — подрыв благосостояния военных поселян и причина воровства и обмана, причина удаления контроля…».
Петр Александрович всегда был наиболее близким из всех родственников Святителю Игнатию, являясь для него братом «не только по плоти, но и по духу, неизменным его жизненным спутником, особенно со времени совместного служения в Ставрополе».
В переписке между братьями Святитель Игнатий всегда является руководителем, наставником и духовным покровителем. Например, в письме от 18 сентября 1854 г. он пишет: «Весьма благоразумно делаешь, что не сводишь близкого знакомства ни с одним духовным лицом: такое знакомство может очень легко послужить ко вреду и весьма, весьма редко к пользе. Советуйся с книгами Святителя Тихона, Димитрия Ростовского и Георгия Затворника, а из древних — Златоуста; говори духовнику грехи твои — и только. Люди нашего века, в рясе ли они, или во фраке, прежде всего внушают осторожность. Молитвы читай утром и вечером следующие: Трисвятое, Отче наш, 12 Господи помилуй, Псалом 50-й, Символ веры, Богородице и некоторые поминания; после сего клади 10 поясных поклонов с молитвою: Боже, очисти мя, грешного».