С началом строительства Воскресенского Новодевичьего (Смольного) монастыря (1754 г.) территория слободы сократилась, а в 1783 г. в западной части началось строительство дворца светлейшего князя Г.А. Потемкина, который до смерти последнего (1791 г.) называли Конногвардейским домом, а позже – Таврическим дворцом. В.Я. Курбатов, строгий критик и знаток прекрасного, по достоинству оценивал Таврический дворец как пример работы «мастера переходного (от барокко к классицизму. – А. В.) времени».
В 1829–1830 гг. архитектор А.Е. Штауберт вновь перестроил здание палат Кикина, которые продолжали занимать учреждения военного ведомства. Было разобрано крыльцо, уничтожена отделка фасадов стиля «петровского барокко», перестроен третий этаж центральной части здания и создано новое завершение в виде треугольных фронтонов. В 1874 г. к зданию со стороны Невы пристроили два симметричных лестничных помещения.
Основной магистралью, пересекающей Рождественскую часть с юга на север, была Слоновая улица, продолжавшаяся после 9-й Рождественской до Смольного института Конногвардейской улицей. В 1880 г. обе улицы объединили в одну улицу протяженностью 2,5 км, за которой оставили название Слоновой. В 1900 г. магистраль соединили с Невским проспектом и переименовали в Суворовский проспект, от которого в западном направлении отходили Шпалерная и Кирочная улицы, составившие вместе с 8-й Рождественской и ее продолжением – Бассейной улицей выходы из Рождественской части в центр города.
До начала XX в. незастроенные пространства в Рождественской части составляли Таврический сад, Преображенская площадь, сады и скверы вблизи Смольного монастыря и Дома призрения лиц духовного звания, огороды между Костромской улицей и промышленной застройкой Калашниковской набережной.
Рождественская часть делилась на три квартала: первый в границах от Невского до Калашниковского (ныне – пр. Бакунина) проспектов и 4-й Рождественской улицы, второй – от Калашниковского проспекта и 4-й Рождественской до Большой Болотной улицы (ныне – ул. Моисеенко) и квартал между Суворовским проспектом и Дегтярным переулком, третий – севернее Большой Болотной улицы. Съезжий дом Рождественской части первоначально находился на 2-й Рождественской ул., 1.
В 1842 г. архитектор Мальгин перестроил и расширил его и составил проект пожарной каланчи для деревянного флигеля. Генерал-губернатор Санкт-Петербурга А.А. Кавелин в 1843 г. осмотрел этот съезжий дом и отметил, что «арестанты спали очень тесно на нарах и еще теснее под нарами». В своем приказе от 22 марта того же года он потребовал не держать арестантов при частях более одного месяца, а отправлять их в тюрьмы, даже если расследование дел не было завершено. В 1860-х гг. Съезжий дом и пожарную команду Рождественской части перевели в новое здание, построенное М.Ф. Петерсоном совместно с Э.Г. Шуберским и Н.П. Гребенкой (1862–1864 гг.; Мытнинская ул., 3 / 3-я Рождественская ул., 50 / 4-я Рождественская ул., 49), а в перестроенном в камне доме на 2-й Рождественской разместилось полицейское управление Рождественской части.
Значительные перемены произошли на Смольной и Калашниковской набережных и прилегающих к ним территориях. В 1808 г. в северо-восточный корпус Смольного монастыря был перенесен Вдовий дом, которому передали церковь во имя Святой Великомученицы Екатерины, построенную по проекту Ф.-Б. Растрелли. В 1832–1835 гг. архитектор В.П. Стасов переделал интерьеры собора Воскресения Словущего, построил западную часть каре Смольного монастыря, перепланировал сад в монастырском дворе. В 1842 г. «мещанскую половину» Смольного института преобразовали в Александровский институт, при котором создали педагогический класс; в 1865 г. этот институт стал самостоятельным учебным заведением с домовой церковью во имя Святого Благоверного князя Александра Невского, освященной в 1867 г. Церковь того же посвящения действовала при Николаевском Смольном институте благородных девиц. Значительные работы в зданиях комплекса Санкт-Петербургских Градских богаделен (ул. Смольного, 2, 4) провели архитекторы Е.В. Цыгоров (1820–1824 гг.), П.С. Плавов (1835–1836 гг.), Ф.И. Эппингер (1851–1855 гг.), А.Х. Пель, Н.К. Красовский и В.Р. Курзанов (1870–1871 гг.). Сплошного движения транспорта по Смольной набережной не было.
Калашниковская (ныне – Синопская) набережная использовалась как пристань – речные ворота Петербурга, через которые ежедневно город принимал множество товаров и людей, стекавшихся в столицу водными путями. Сюда прибывали грузовые баржи, в огромных объемах свозились зерно, рыба, соль, уголь, кожи, сало, керосин, лес, руда и прочие товары для нужд столицы и для продажи на экспорт; здесь они хранились в амбарах и на складах или перегружались в вагоны на железнодорожной ветке от Окружной железной дороги. На разгрузке работали многочисленные артели крючников, тут же получали расчет ватаги бурлаков и судорабочих. Зимой в пустых барках ютились бродяги и нищие. Поблизости жили «постоянные» рабочие; тут же находился и торг: в Барановском трактире (расположенном в одноименном переулке) заключались сделки на куплю-продажу зерна. Это оживленное место стало источником криминальных случаев и вывело Рождественскую часть по этому показателю на первые места в городе – хотя преступлений в этом районе города совершалось втрое меньше, чем в буйной Спасской части, но все же вдвое больше, чем в аристократической Адмиралтейской. Но уж если совершались, то всерьез: за период с 1868 по 1877 г. здесь произошло 13 убийств (в Спасской части – 17; в соседней Александро-Невской – 5).