Противники Сапеги выдвигали контраргументы, что король обещал прислать Владислава, а гетман с войском присягнули. Нельзя сделать клятвопреступниками короля, гетмана и целое войско. Народ русский без царя быть не привык, и если им не дать королевича, ими избранного, то они обратятся к другому и будут настроены против Польши. Силой войны не кончить, потому что нет средств для этого. Если же войну не закончить, то беда ждёт с двух сторон: от Москвы, так как там изберут другого государя, и от своих, недовольных неуплатой жалованья. Заплатить войску из Польши трудно, у короля нет денег. Если же королевич станет царём в Москве, то Польша приобретёт доброго соседа, легко будет возвратить Лифляндию и Швецию, да и от татар будет меньше вреда. Большая часть шляхтичей могла бы переселиться в Москву, отчего в Речи Посполитой стало бы меньше бунтов, основная причина которых — бедность граждан. Под гражданами королевские советники подразумевали, естественно, не всё польское население, а исключительно шляхту.
В конце концов победили противники отпуска королевича, которые рассматривали Россию как поверженную державу с не способным на сопротивление народом. Они предлагали начать колонизацию России немедленно, «привести все дела в порядок» до приезда Владислава. Далее шли ссылки на молодость Владислава, а ему действительно было всего 15 лет, что отпускать королевича в Москву нельзя без согласия сейма. Дошло до того, что была поставлена под сомнение легитимность русского посольства. Говорили, что Голицына и Филарета выслали из Москвы как людей подозрительных, и надо отправить польских послов в Москву и там вести переговоры с «добрыми людьми», но если кто из послов согласится с поляками, то его также послать в Москву.
15 октября на встрече с русскими послами паны радные заявили, что король никак не может отступить от Смоленска и вывести войско из Московского государства, так как он пришёл для того, чтобы навести порядок в России, истребить «вора», очистить города, а потом дать своего сына на московский престол. Послы отвечали, что в государстве гораздо ранее настанет покой, если король выведет войско, а для истребления «вора» достаточно одного отряда Жолкевского, так как «вор» теперь силён только польскими войсками. Поход же всего королевского войска на «вора» разорит Россию, и без того уже опустошённую. Эта и последующие встречи превратились в итальянскую оперу: послы пели свою арию, а паны — свою, не слушая оппонентов.
30 октября в королевский лагерь под Смоленском торжественно въехал гетман Жолкевский. Он привёз сверженного царя Василия с братьями и представил их Сигизмунду. Поляки потребовали, чтобы Василий Шуйский поклонился королю, на что тот ответил: «Нельзя московскому и всея Руси государю кланяться королю: праведными судьбами божиими приведён я в плен не вашими руками, но выдан московскими изменниками, своими рабами».
Филарет возмутился насильственному привозу к Смоленску царя Василия и тому, что он был представлен в светском платье. Жолкевский отвечал митрополиту (посольство и поляки признавали Филарета только митрополитом, против чего он и сам не возражал): «Я взял бывшего царя не по своей воле, но по просьбе бояр, чтоб предупредить на будущее время народное смятение. К тому же он в Иосифове монастыре почти умирал с голода. А что привёз я его в светском платье, то он сам не хочет быть монахом, постригли его неволею, а невольное пострижение противно и вашим и нашим церковным уставам, это и говорит патриарх». На что Филарет сказал: «Правда, бояре желали отослать князя Василия за польскою и московскою стражею в дальние крепкие монастыри, чтоб не было смуты в народе: но ты настоял, что его отослать в Иосифов монастырь. Его и братьев его отвозить в Польшу не следовало, потому что ты дал слово из Иосифова монастыря его не брать, да и в записи утверждено, что в Польшу и Литву ни одного русского человека не вывозить, не ссылать. Ты на том крест целовал и крестное целование нарушил. Надобно бояться бога, а расторгать мужа с женою непригоже, а что в Иосифове монастыре его не кормили, в том виноваты ваши приставы, бояре отдали его на ваши руки».