Отец мой был некогда записан в Измайловском полку и на 16-м году от рождения поехал учиться в Страсбургский университет, где отличался своими успехами. Пробыв четыре года в чужих краях, он возвратился в Россию и вступил в морскую службу, был в 1788 году адъютантом у принца Нассау, участвовал в нескольких морских сражениях со шведами, и когда порученная в командование его галера, избитая ядрами, пошла ко дну, он, по спасении своего экипажа, последний бросился в воду с несколькими матросами. Будучи ловким плавателем, он, при небольшой на ноге ране, полученной им от корабельного осколка, надеялся достичь одного из наших судов, но был вытащен из воды шведами, взят в плен и отвезен в Стокгольм, где оставался около года. По размене пленных его назначили капитаном фрегата. В то время он женился на матери моей, Александре Михайловне Мордвиновой, дочери генерал-инженера Михаила Ивановича Мордвинова. В царствование Павла Петровича отец мой был неожиданно переведен в Елисаветградский гусарский полк майором и находился с полком в походе в Молдавии, откуда скоро возвратился в Петербург и вышел в отставку подполковником.
Матушка скончалась в 1809 году апреля 21-го дня, на 39-м году от роду. Наружность ее соответствовала прелестным качествам души. Причиной кончины ее было то, что она хотела, вопреки совету врачей, сама кормить брата Сергея, дабы не обидеть его против старших пятерых детей своих, которых сама вскормила. Кончины ее были еще причиной заботы и труды, перенесенные, почти на исходе беременности, при постели старшего брата моего Александра, находившегося при смерти от постигшей его сильной горячки. Матушка похоронена в Москве в Девичьем монастыре; над могилой, по желанию ее, посадили любимое ею дерево акацию, которую окружили железной решеткой – памятник, отличающийся простотой среди окружающих его камней и мраморов.
До женитьбы своей отец мой имел порядочное состояние, но не сохранил оного, так что у него оставалась только Петербургская отчина сельцо Сырец, состоящее из 90 душ, в том числе и приданое матушки. Впоследствии отец жил очень скромно и, как выше сказано, издерживая доходы свои единственно на наше воспитание, сам лично занимался образованием нашим. Теперь ему от роду 50 лет, день рождения его празднуем 15 сентября. По учреждению известного корпуса колонновожатых, батюшка ныне посвящает время и труды свои на образование собравшихся около него молодых людей, которых он готовит для службы, чем заслужил общую любовь и уважение. Перед отъездом моим из Москвы он был зачислен в квартирмейстерскую часть генерал-майором. Брат мой Михайла и Петр Колошин, состоящие при нем на службе, занимают места ближайших его помощников.
Старший брат мой Александр был коротко знаком с капитаном Сулимой, который принадлежал к масонской ложе и уговорил его вступить в ложу, где он в скором времени был возведен на степень великого мастера. Поводом к такому почету был его характер и увлекательное обхождение, которое в течение всей его жизни доставляло ему доброе расположение знакомых; но при ограниченных денежных средствах он в кругу нового своего братства тратил скудные остатки своих денег за оказываемый ему почет. Не знаю, в какую именно ложу он ездил; собрание у них были по средам, и Сулима всякий раз возвращался домой порядочно навеселе. Брат получал из ложи книги, в которых объяснялись условные масонские знаки, и он читал эти книги, когда ложился спать. Кровати наши стояли головами вместе одна против другой. Таясь от меня, он принимался за книгу, когда полагал, что я уснул, и тогда начинал читать, лежа на спине, но я не спал и, потихоньку перевернувшись на живот, смотрел к нему в книгу через изголовья кроватей. Таким образом, я вскоре выучился условным знакам масонов и удивлял брата и Сулиму знанием великой тайны их. Меня они стали приглашать в ложу, но я отказывался; между тем брат, который был еще новичком, хвалясь лестным для него доверием ребячливого братства и тайнами, в которые его посвятили, рассказывал мне отрывками об испытаниях, через которые он прошел, когда его принимали.