В 1727 г. Пётр II пожаловал дворец «за службу» князю Г. Д. Юсупову, потомку ногайских ханов. Этот подарок Юсуповы ценили и никому не передаривали и не продавали. Палаты оставались их собственностью почти двести лет, хотя во второй половине XIX века князья тут уже не жили, отдав помещения под работный дом.
Внук подполковника, Н. Б. Юсупов, был очень богатым и хорошо образованным человеком, это ему А. С. Пушкин посвятил стихотворение «К вельможе». Ему принадлежали великолепная библиотека, картинная галерея, собрание превосходных статуй и свой театр (он занимал дом № 24). В его дом съезжались не только вельможи, но и даровитые художники и учёные. Здесь часто давались балы, спектакли и устраивались музыкальные и литературные вечера.
Рядом с двором князя Б. Г. Юсупова, ближе к Садовому кольцу, стоял двор канцлера графа А. П. Бестужева-Рюмина. Напротив тесных старинных палат, на другой стороне переулка, располагался большой трёхэтажный каменный дом, тоже принадлежавший Юсуповым и возведённый специально для устройства праздников и приёма гостей. Возле него был разбит обширный регулярный парк в версальском стиле. Там часто гулял маленький Саша Пушкин, позже написавший:
Пушкины часто переезжали из дома дом, но переулок не покидали. Они жили то в доме Волковых (№ 2), то снимали флигель дома Юсуповых, то в доме графа Санти (№ 8) (в 1803–1807 гг.), то чуть поодаль, на углу Мальцева (ныне Малого Козловского) переулка в доме князя Ф. С. Одоевского (отца писателя).
В 1812 г. почти все деревянные дома сгорели. Сгорел и знаменитый Юсупов сад. А вот старинные палаты устояли перед безжалостным пламенем. После пожара всё вокруг застроили деревянными домами, один из них простоял очень долго, застав даже XX век (теперь на месте этого дома сквер). Это ветхое жилище людская молва прозвала «Ларинским домом», предполагая, что именно его имел в виду Пушкин, описывая приезд Татьяны Лариной в Москву:
На самом же деле этот дом принадлежал Ершову, считающемуся автором сказки «Конёк-Горбунок». Почему «считающемуся»? Да не всё так просто с этой сказкой! Уж больно она походит на пушкинские, а сам Ершов впоследствии ни разу не написал хоть что-нибудь даже близко приближающегося к этому творению. Пушкин часто был сильно стеснён в средствах и вынужден был порой скрывать свои доходы от кредиторов. Изучив тексты и отношения двух поэтов, литературоведы выдвинули версию, что настоящим автором «Конька-Горбунка» является Александр Сергеевич, а Ершов был всего лишь подставным лицом, чьё имя использовали по договоренности, чтобы все гонорары не ушли на оплату долгов.
В этом же переулке находится усадьба Сухово-Кобылиных (дом № 17).
Имя Александра Васильевича Сухово-Кобылина известно и в связи с его замечательными комедиями, и из-за его причастности к громкому преступлению (убийству своей возлюбленной). Но те драматические события разыгрались в других домах, там, где писатель пребывал намного позже (об этом ещё будет сказано), а в этой усадьбе прошла его юность — и тоже не без инцидентов.
Учителем юного Александра и его сестры Елизаветы был молодой профессор Московского университета Николай Иванович Надеждин. Между ним и Елизаветой вспыхнул роман: она была в восторге от его образованности и эрудиции, он считал её самой талантливой своей ученицей. Однако между молодыми людьми стояло серьёзное препятствие: Елизавета была столбовой дворянкой, а Надеждин — сыном сельского священника. Сухово-Кобылины выступили категорически против этого брака. Елизавета даже пыталась бежать с любимым, но эта попытка провалилась, а её возмущённый брат вызвал Надеждина на дуэль. Надеждин отказался, заявив, что раз в силу своего недворянского происхождения недостоин стать мужем Елизаветы, то и стреляться с её братом ему не должно. Взбешённый таким ответом Сухово-Кобылин потребовал, чтобы Надеждин убирался вон из Москвы, грозя, что иначе пристрелит дерзкого поповича, даже если за то ему будет Сибирь. В сложившихся условиях Николай Иванович предпочёл уволиться и уехать в путешествие за границу.