Однако учиться на третьем курсе Свиязеву не пришлось. От графини Шаховской в Академию пришла бумага: «Ко дню святого Илии пророка быть не мешкая Ивашке Свиязеву в селе Кольцово». Графиня решила строить себе дом в губернском городе Перми, для чего и вызвала своего крепостного.
Ни просьба Академии художеств, которая видела в Свиязеве талантливого архитектора и художника, ни ходатайство Горного корпуса — ничто не могло заставить графиню отказаться от своего требования. Академия же не имела права задерживать воспитанника, если он был крепостным помещика, без согласия последнего, так как в 1817 году президент Академии получил распоряжение Александра I о том, чтобы «впредь в число воспитанников Академии художеств не были принимаемы крепостные люди, не имеющие от господ своих увольнительные».
Крепостной оставался собственностью помещика. Такой собственностью помещицы Шаховской был Иван Свиязев.
Начались мрачные дни. Свиязев должен был исполнять капризы помещицы по строительству дома в Перми. Вскоре под его руководством выстроили красивое деревянное здание. К сожалению, оно не сохранилось до наших дней — сгорело во время сильного пожара, бывшего в Перми в 1842 году.
Начало пути
В 1818 году Горный корпус и Академия художеств обратились к Шаховской с просьбой разрешить Свиязеву выехать в Петербург, где ему поручалось строительство императорской бумажной фабрики.
Бумажное производство в России тогда было исключительно ручным. Вручную наливали размельченную массу и вручную же готовые листы бумаги разглаживали деревянными молотками.
Еще в 1813 году было решено построить в Петергофе (ныне Петродворец) казенную бумажную фабрику с машинным способом изготовления бумаги. Отлив полностью механизировался, сушка бумаги должна была осуществляться на цилиндрах, нагретых паром. Для строительства такой фабрики и был вызван в Петербург Свиязев.
Всю свою энергию молодой Свиязев сосредоточил на строительстве еще не бывалой в России бумажной фабрики. Желание строить было так велико, энергии имелось так много, что, работая на строительстве фабрики, одновременно Свиязев стал руководить работами по сооружению петергофских фонтанов.
Построенная Свиязевым Петергофская фабрика была первой в России с непрерывно-поточным производством отлива и сушки бумаги.
В 1819 году Свиязев опубликовал свою первую работу — «Краткое описание императорской бумажной фабрики в Петергофе».
По окончании строительства бумажной фабрики Свиязев обратился в Академию художеств с прошением присвоить ему звание архитектора. В прошении он указывал, что «старается приобретенные им теоретические познания употребить в практику».
Академия художеств рассмотрела представленные Свиязевым рисунки и материалы и присудила ему звание свободного художника архитектуры. Такое звание, как правило, присуждалось только после окончания Академии и то не всем; от некоторых требовалось еще отбыть академическую командировку за границей.
Свиязев не терял надежды вернуться в Академию и получить законченное образование. По приезде в Пермь он просил у Шаховской разрешения продолжать учение. Шаховская отказала, повелев ему быть при имении и «делами строительными ведать и строения хозяйские сохранять».
Вступились за Свиязева Академия художеств и Горный корпус, предложив Шаховской за него выкуп. После длительной переписки и личных выездов в Пермь представителей Академии художеств и Горного корпуса Шаховская отпустила Свиязева на волю, получив за него очень крупную сумму денег.
Директор Горного корпуса, который ведал всеми горными заводами, взял Свиязева к себе на работу.
На первых порах Свиязев занимался Олонецкими и Сестрорецкими заводами. Под его присмотром велись ремонтные работы. В начале 1822 года с этой же целью он был послан на Урал. Вскоре Свиязев стал главным архитектором находившегося в Перми Уральского горного правления.
Здесь, на Урале, деятельность Свиязева была связана с дальнейшим развитием горнозаводской промышленности. В частности, ему поручалось составить проект новой медеплавильни построенного еще в 1736–1738 годах Мотовилихинского медеплавильного завода.
Одновременно Свиязев выполнял отдельные поручения властей губернского города Перми.
В 1824 году через Пермь проезжал Александр I. Для встречи императора губернские власти решили выстроить беседку на Загородном бульваре — участке Сибирского тракта между Сибирской и Казанской заставами (ныне главная аллея сада имени Максима Горького). По проекту и под наблюдением Свиязева была построена ротонда.