Родные братья бабушки Петра по матери – знаменитые моряки. Три сына сенатора Петра Гаврииловича Лазарева (1743–1800), помещенные им в Морской кадетский корпус (1800), вписали яркие страницы в историю русского флота.
Старший, Андрей (1787–1849), участвовал в боевых действиях против французов в Средиземном море (1806–1807), в блокаде русско-английской эскадрой берегов Голландии (1812–1814); командуя бригом «Новая Земля», сделал попытку обойти Новую Землю (1819), однако из-за льдов и цинги удалось пройти лишь вдоль западных и южных ее берегов; командуя шлюпом «Ладога», совершил кругосветное плавание, посетив Камчатку и Русскую Америку (1822–1824); командовал на Балтике 12-м флотским экипажем (1825) и отрядом судов, перевозивших раненых из Данцига в Кронштадт (1832), 2-й бригадой 2-й флотской дивизии, 3-й бригадой 1-й флотской дивизии, 1-й флотской дивизией. Вице-адмирал (1842). Автор: «Плавание брига “Новая Земля” под начальством флота лейтенанта А. Лазарева в 1819 г.» (СПб., 1820), «Плавание вокруг света на шлюпе “Ладога” в 1822, 1823 и 1824 гг.» (СПб., 1832).
Средний, Михаил (1788–1851), в числе лучших выпускников Морского корпуса был отправлен в Англию и служил волонтером на английском флоте. С 1808 г. – на Балтийском. Участник русско-шведской (1808–1809) и Отечественной (1812) войн. Командуя шлюпом «Суворов», совершил кругосветное плавание (1813–1815). Открыл атолл, назвав его именем своего судна. В составе Антарктической экспедиции Ф. Ф. Беллинсгаузена, командуя шлюпом «Мирный», совершил свое 2-е кругосветное плавание (1819–1821). На фрегате «Крейсер», имея под своей командой шлюп «Ладога» брата Андрея, в 3-й раз обогнул землю (1822–1825). Командуя линкором «Азов» (с 1826) и будучи начальником штаба эскадры контр-адмирала Л. П. Гейдена, отличился в Наваринском сражении (1827). Командуя отрядом судов, блокировал Дарданеллы в ходе русско-турецкой войны (1828–1829). Начальник штаба Черноморского флота (с 1832). Экспедицией в Босфор способствовал заключению Ункияр-Искелессийского мира (1833). Командующий Черноморским флотом и командир Севастополя и Николаева (с 1834). Руководил десантными операциями против горцев на Кавказском побережье (1836–1840). Адмирал (1843). Ввел новую систему подготовки кадров, существенно усилил Черноморский флот новыми парусниками, пароходо-фрегатами и пароходами, построил Дом собраний в Севастополе, адмиралтейства в Севастополе, Николаеве, Одессе, Новороссийске, док, ремонтные мастерские, береговые батареи, реорганизовал Морскую библиотеку, открыл школу для детей матросов, воспитал плеяду выдающихся моряков, среди которых Г. И. Бутаков, В. И. Истомин, В. А. Корнилов, П. С. Нахимов. Кавалер всех российских орденов, в т. ч. и Андрея Первозванного (1850).
Младший, Алексей (1793–1851), начал службу на Балтике (1805). В составе Архипелагской экспедиции вице-адмирала Д. Н. Сенявина участвовал в русско-турецкой войне (1806–1812) и отличился в Дарданелльском и Афонском сражениях. Лейтенантом на шлюпе «Благонамеренный» под командой капитан-лейтенанта Г. С. Шишмарева совершил кругосветное плавание, дважды заходя в Чукотское море через Берингов пролив (1819–1822); оставил «Записки о плавании военного шлюпа “Благонамеренного” в Берингов пролив и вокруг света для открытий в 1819, 1820, 1821 и 1822 годах, веденные гвардейского экипажа лейтенантом А. П. Лазаревым», обнаруженные и опубликованные в 1950 г. Ходил из Кронштадта к Исландии (1823). Капитан-лейтенантом участвовал в блокаде Дарданелл (1828). Адъютант вел. князя Николая Павловича (1824); участвовал в подавлении восстания на Сенатской площади (14.12.1825). Флигель-адъютант Николая I (1825). Отличился при осаде Варны в русско-турецкую войну 1828–1829 гг. С 1833 г. – на Балтийском флоте. Контр-адмирал (1839). Командир Астраханского порта и Каспийской флотилии (1839–1842). Керчь-Еникальский градоначальник (1850–1851).
П. Н. Дурново был женат на Екатерине Григорьевне Акимовой (1852–4.04.1927), дочери коллежского асессора Григория Алексеевича Акимова (1812–9.11.1884) и Надежды Никаноровны Топориной (? – не ранее 1854). Ее старший брат, Михаил (1847–1914) был товарищем прокурора Киевской судебной палаты, министром юстиции (1905–1906) и председателем Государственного Совета (1907–1914). Значительную часть года проводила в своем имении при селе Трескино Сердобского уезда. Часто болела, особенно сильно весной 1891 г. Перед смертью была разбита параличом.