Усадьба на Большой Никитской значительно умножила семейный капитал Воронцовых, принося доход от аренды помещений. В 1812 году дом пережил пожар, был восстановлен (жаль, что Дашковой уже не было в живых – она бы непременно приняла участие в строительстве). Среди арендаторов были люди, имеющие прямое отношение к музыке, – вот когда уже определилась судьба этого квартала! В 1820—1830-е годы не было более популярного музыканта в России, чем Джон Фильд, тот самый, что собирал на свои концерты в Благородном собрании тысячи слушателей, в том числе и императорскую семью. Ирландский пианист-виртуоз приехал в Россию в 1804 году, да так и остался. Много концертировал, имел учеников (А. Дюбюк, А. Верстовский, А. Гурилев и др.). Михаил Глинка писал о нем: «Хотя мне и не посчастливилось слышать его игру слишком часто, я отчетливо помню его энергичное и в то же время утонченное и четкое исполнение. Мне казалось, что он даже не нажимал на клавиши, его пальцы просто падали на них подобно каплям дождя, скользили как жемчужины по вельвету. Ни я и никто из истинных почитателей музыкального искусства не может согласиться с Листом, который однажды сказал, что Филд играл вяло. Нет. Игра
Филда всегда была смелой, беспорядочной и разнообразной, он никогда не уродовал искусство подобно шарлатану, как это зачастую делают очень популярные пианисты». Пианист жил на Большой Никитской в 1820-х годах.
В главном доме усадьбы в конце 1820-х годов разместилось Училище для благородных девиц известного московского педагога Дарьи Данкварт.
Вид с Большой Никитской улицы
Пушкин, обозвав графа Воронцова полукупцом, оказался не совсем прав. Михаил Воронцов был настоящим купцом – он не только служил, но и успевал заниматься виноделием, обладая крупнейшими в Российской империи виноградными плантациями, находившимися в Крыму. Прибыль от продажи шла ему в карман. Но где хранить бесценные коллекции бутылок с вином? Правильно, в Москве, где любителей вина хоть отбавляй. Вот и обустроил он в подвале своего особняка на Большой Никитской обширное винохранилище, использовавшееся по прямому назначению и наследниками винодела. К началу 1870-х годов воронцовские плантации уже перешли под опеку Удельного ведомства, управлявшего царским имуществом. Оно также арендовало и подвалы.
И вот в 1871 году в роскошном особняке на Большой Никитской, аккурат над подвалами поселилось первое в Москве высшее музыкальное учебное заведение, во главе с его отцом-основателем Николаем Григорьевичем Рубинштейном (1835–1881). К тому времени он уже пять лет был директором консерватории, учрежденной 24 декабря 1865 года по Высочайшему соизволению императора Александра II и по ходатайству великой княгини Елены Павловны, августейшей покровительницы Русского музыкального общества, к которому с 1868 года прибавилось прилагательное «Императорское».
Консерватория выросла из музыкальных классов Русского музыкального общества, открытых в Москве в 1860 году и призванных развивать музыкальное образование, вкус к классической музыке и выявлять отечественные таланты. Московское отделение общества возглавлял Николай Рубинштейн, а Петербургское – его брат Антон. Важнейшую помощь в создании консерватории оказал музыковед и меценат, князь Николай Петрович Трубецкой, выступивший ее соучредителем. Первые занятия начались 1 сентября 1866 года – эту дату и принято считать ее днем рождения. Но тогда консерватория размещалась в другом месте – в доме баронессы Черкасовой на Воздвиженке (ныне на месте сквера у станции метро «Арбатская»). Рубинштейн поселился рядом, на нижнем этаже во флигеле, соседом его был Чайковский, он жил наверху. Это было очень удобно – они могли сразу пройти из своих комнат в помещение консерватории.
Примечательно, что еще до открытия консерватории на Воздвиженке Рубинштейн и Чайковский также соседствовали – в квартире в доме Воейковой (на пересечении с Моховой улицей, где сейчас находится Российская государственная библиотека). Когда в январе 1866 года Петр Ильич приехал в Москву, он сразу же пришел к Рубинштейну на Моховую. С Чайковским они жили в соседних комнатах, их разделяла перегородка. Как пишет Нина Берберова, «Рубинштейн уверял, что Петр Ильич мешает ему спать скрипом своего пера.