В конце концов победили противники отпуска королевича, которые рассматривали Россию как поверженную державу с неспособным на сопротивление народом. Они предлагали начать колонизацию России немедленно, «привести все дела в порядок»» до приезда Владислава. Далее шли ссылки на молодость Владислава, а ему действительно было всего 15 лет, что отпускать королевича в Москву нельзя без согласия сейма. Дошло до того, что была поставлена под сомнение легитимность русского посольства. Говорили, что Голицына и Филарета выслали из Москвы как людей подозрительных и надо отправить польских послов в Москву и там вести переговоры с «добрыми людьми», но если кто из послов согласится с поляками, то его также послать в Москву.
15 октября на встрече с русскими послами паны радные заявили, что король никак не может отступить от Смоленска и вывести войско из Московского государства, так как он пришел для того, чтобы навести порядок в России, истребить «вора», очистить города, а потом дать своего сына на московский престол. Послы отвечали, что в государстве гораздо ранее настанет покой, если король выведет войско, а для истребления «вора» достаточно одного отряда Жолкевского, так как «вор» теперь силен только польскими войсками. Поход же всего королевского войска на «вора» разорит Россию, и без того уже опустошенную. Эта и последующие встречи превратились в итальянскую оперу, послы пели свою арию, а паны — свою, не слушая оппонентов.
30 октября в королевский лагерь под Смоленском торжественно въехал гетман Жолкевский. Он привез сверженного царя Василия с братьями и представил их Сигизмунду. Поляки потребовали, чтобы Василий Шуйский поклонился королю, на что тот ответил: «Нельзя московскому и всея Руси государю кланяться королю: праведными судьбами Божиими приведен я в плен не вашими руками, но выдан московскими изменниками, своими рабами».
Филарет возмутился насильственному привозу к Смоленску царя Василия и тем, что он был представлен в светском платье. Жолкевский отвечал митрополиту (посольство и поляки признавали Филарета только митрополитом, против чего он и сам не возражал): «Я взял бывшего царя не по своей воле, но по просьбе бояр, чтоб предупредить на будущее время народное смятение. К тому же он в Иосифове монастыре почти умирал с голода. А что привез я его в светском платье, то он сам не хочет быть монахом, постригли его неволею, а невольное пострижение противно и вашим и нашим церковным уставам, это и говорит патриарх». На что Филарет сказал: «Правда, бояре желали отослать князя Василия за польскою и московскою стражею в дальние крепкие монастыри, чтоб не было смуты в народе: но ты настоял, что его отослать в Иосифов монастырь. Его и братьев его отвозить в Польшу не следовало, потому что ты дал слово из Иосифова монастыря его не брать, да и в записи утверждено, что в Польшу и Литву ни одного русского человека не вывозить, не ссылать. Ты на том крест целовал и крестное целование нарушил. Надобно бояться Бога, а расторгать мужа с женою непригоже, а что в Иосифове монастыре его не кормили, в том виноваты ваши приставы, бояре отдали его на ваши руки».
Попытки поляков уговорить послов, чтобы те приказали воеводе Шеину сдать Смоленск, были безрезультатны. Поэтому 21 ноября 1610 года король устроил генеральный штурм крепости. На рассвете поляки взорвали мощную мину в подкопе под одной из башен. Башня развалилась, рухнула и стена на протяжении более 20 метров. В пролом трижды вламывались поляки и трижды были выбиты из города. Штурм кончился полной неудачей.