Раздоры с губернатором, остудь монаршего благоволения предвещали скорый крах общественной деятельности князя. В душе непрестанно звучала музыка разрушения, гибели. Она не обманывала. Беды редко приходят в одиночку. Давно уже добрые души старались довести до сведения княгини Голицыной небезосновательные толки об изменах мужа. Сильная натура Юрки ни в чем не знала удержу. За страстные объятия с женой приходилось расплачиваться долгим постом, когда она вынашивала, рожала и кормила очередное дитя. Самоограничение не было ему свойственно. Да и какой в нем толк? Княгиня ничего не теряла, все остальные выигрывали, ибо грубые веления отрывали его от звуков сладких и молитв, равно и от служения обществу, а вокруг было столько возможностей облегчить плоть, освободить дух. И разве от этого он меньше любил свою Катю? Да нет же! В раскаянии, ощущении вины освежалось, омывалось незримой слезой его чувство, он вновь видел ее девушкой в заросшем саду, куда пробиралась белая козочка с любовной запиской. И желал свою милую скромницу, как в первый день.
Доверчивая, счастливая своей любовью к красавцу мужу и прелестным детям, ласково прикрытая от невзгод родней и друзьями, Екатерина Николаевна отказывалась верить злым наветам. Ах, господи, мой Юрка как Иосиф Прекрасный. Каждой женщине, словно жене Потифара, хочется склонить его на ложе, а он убегает, оставив верхнюю одежду", - говорила она со смехом. Сравнение это было верным лишь отчасти. Многие дамы, подобно легендарной Мут, хотели склонить на ложе нашего героя, но он отнюдь не блистал расчетливыми добродетелями сына Иакова, величайшего карьериста всех времен и народов, - Юрка не убегал от распаленных красавиц, а когда расставался на время с одеждами, то не ограничивался верхней.
Может, Екатерина Николаевна и допускала, что во время долгих отлучек Юрка не был столь безупречен и позволял дамам целовать свои музыкальные руки, большего греха не могла измыслить провинциальная затворница, божья душа, ставшая на сломе жизни усилиями мужа и судьбы железной душой. Но ее доверчивость была не так глупа: ведь в главном он никогда не изменял ей, во всех своих похождениях князь не истратил нисколечко души, где по-прежнему безраздельно царил образ первой любви.
И тут произошло непоправимое: Голицын влюбился без памяти в дочь своих друзей Рахманиновых - Юлию. "Без памяти" - в данном случае не просто словесный штамп, прикрывающий неспособность изобразить стихийное, нерассуждающее чувство. Голицын влюбился, как сицилийский юноша, о котором говорят: "громом расшибло". И в этой сумасшедшей, безответной, тягостной и безнадежной любви забыл о всех правилах и обязательствах, налагаемых семьей, обществом, воспитанием, законами соседства и дружбы. Он преклонялся перед четой Рахманиновых, знал, как неуместна и оскорбительна в их глазах неуправляемая страсть семейного человека к их дочери-невесте, знал, как любят и чтят они Екатерину Николаевну, но ничего не мог поделать с собой. Искушенный в обманах, Юрка даже не пытался что-либо скрыть. Расшибло громом... Он не помнил, как пришло к нему это чувство, когда он открыл в угловатой девчонке созревшую прелесть женщины и понял, что без нее не стоит жить. Ему казалось - это было всегда: для нее плавал он в гондоле, одетый "настоящим итальянцем", и пел под гитару, для нее дрессировал белую козочку и посылал с записками в заросший душистый сад, для нее очаровывал властную старуху Дунину. Она слилась с Катей, потом вытеснила ее, отобрав все, что той по праву принадлежало. И Катя поняла, что у нее отняли и сад, и козочку, и серенаду, отняли душу единственно любимого человека, и не простила ему этого.
Даже самое сильное и светлое чувство, если оно противоречит человеческим установлениям (пусть условным, как в "Ромео и Джульетте"), имеет оправдание лишь в сердцах любящих, но здесь не было взаимности, не было света, я этим усугублялась вина князя. В эту пору исполнение его хором духовной музыки производило тревожное и двусмысленное впечатление: сам того не желая, Голицын так вел певчих, что славословие богу рыдало земной любовью.
Ни пылкие признания, ни искаженные страданием черты, ни безотчетные порывы музыкальных признаний не трогали той, которой князь мечтал вручить свое большое сердце. Он ей просто не нравился. Не нравился - и все тут! Тридцатилетний Юрка казался ей стариком, одним из тех противных сластолюбивых старцев, что подглядывали из кустов за купающейся Сусанной. И ей было невыразимо стыдно перед Екатериной Николаевной, родителями и женихом, который нисколько не догадывался о притязаниях князя. А князь все больше разнуздывался в своем неопрятном страдании. Он бомбардировал Юлию страстными письмами, она возвращала их нераспечатанными, тогда он стал адресовать свои признания ее родителям. Не порывая дружбы, Рахманиновы отказали Голицыну от дома. Екатерина Николаевна объявила о своем намерении жить отдельно, ее религиозность отвергала развод.
Внезапная смерть Николая и восшествие на престол Александра II ускорили крушение Голицына. В глубине души он надеялся, что, отягощенный неудачами Крымской войны, Николай еще вспомнит о Юрке Голицыне, которого не раз брал под защиту, и, отвергнув клевету, утвердит губернским предводителем. Царь обманул ожидания Юрки, как-то чересчур поспешно окончив свой земной путь. Сомнительно, чтобы не связанный никакими сентиментальными воспоминаниями Александр поддержал кандидатуру беспокойного претендента, жалобы на которого сыпались со всех сторон. Среди обиженных оказался и крупный чиновник, числивший за Голицыным полторы тысячи долга, что тот решительно отвергал. Когда домогательства чиновника превысили меру княжеского терпения, он послал ему указанную сумму, но выжег все номера кредитных билетов. Поступок этот вызвал одобрение света, но заставил поморщиться царя, чуждого архаическому чудачеству. Задет был и коммерческий мир: на одном приеме разбогатевший откупщик, здороваясь, первым сунул руку князю. Голицын тут же вложил в протяную длань рубль. И это не понравилось Александру, желавшему, чтобы сословия мирножительствовали.
Все валилось. Правда, в тьме, окутавшей князя, случались проблески. Он учил пению своего крепостного Андреева и открыл у него три удивительные ноты. Этот Андреев стал впоследствии артистом императорского театра.
Но и музыка не спасала. Надо было что-то решать. И князь, измерив глубину своих несчастий, нашел единственный выход: искать смерти на поле брани. Самоубийство он отвергал по тем же мотивам, по каким Екатерина Николаевна отвергала развод. Он записался в ополчение и поехал в Салтыки проститься с семьей, домочадцами и теми, кого он, "отеч родной", твердо решил осиротить.
Он знал, что будет убит, и считал себя вправе смиренно, но торжественно обставить свой уход из жизни.
Он подготовил хор и закатил грандиозную панихиду по самому себе. В Салтыковской церкви - разумеется, без причта и службы - хор пропел своему наставнику "Вечную память". Его дочь вспоминала, что столь стройного и задушевного пения никогда не звучало под сводами церкви, привыкшей к первоклассному исполнению. "Все плакали навзрыд, молясь об упокоении души князя Юрия, который стоял живой, дирижировал хором и молился о том, чтобы господь принял его душу".
На другой день он, коленопреклоненный, в новом ополченском мундире, пел, обливаясь слезами, перед царскими вратами во время напутственного молебна. Затем трогательно прощался с мужиками, которые благословили его образом святого великомученика Георгия.