30 апреля Воровский предал огласке переписку, разоблачавшую в глазах мировой общественности недостойные приемы империалистической дипломатии и вскрывавшую их подлинные намерения: во что бы то ни стало не допустить советскую делегацию на последнюю стадию переговоров о проливах.
«Я считаю невозможным думать, — писал Воровский 27 апреля в секретариат конференции, — чтобы державы-пригласительницы могли прибегнуть к полицейским мерам для удаления России от участия в последней фазе работ комиссии о проливах, что являлось бы вопиющим нарушением условий, на которых России было адресовано приглашение 14 ноября прошлого года».
В то же время Воровский обращал внимание мировой общественности на странную позицию швейцарского правительства. Оно не участвовало в конференции и только оказывало гостеприимство, тем не менее сочло возможным вмешаться в конфликт между Россией и некоторыми из держав-пригласительниц. Таким образом, швейцарское правительство нарушило принцип беспристрастного отношения ко всем делегациям, соблюдать который оно было обязано.
Несмотря на протесты, конференция не желала признавать советскую делегацию, и Воровский не был допущен к заседаниям.
Из Москвы же ему было предписано оставаться в Лозанне и следить за игрой империалистов. Воровский стал ждать… Но он не был простым наблюдателем и начал вести неофициальные переговоры, влиять на конференцию.
2 мая Воровский имел беседу с Исмет-пашой по поводу положения, создавшегося на конференции. Позднее Г. В. Чичерин вспоминал об этой работе Воровского с величайшей благодарностью. Он указывал, что Воровский в Лозанне был в центре сложных мировых отношений, что создавшаяся у него близость с восточными народами и организациями принесла Советскому правительству величайшую пользу. «Те связи, которые уже были у тов. Воровского и которые он продолжал развивать в этой работе, сослужили нам громаднейшую службу».
Империалисты чувствовали вес Воровского в международных делах, его умение вести борьбу за мир. Советский посол мешал их игре. «Здесь нас конференция не признает делегацией, — писал Воровский жене 8 мая, — и если я поеду в Рим, вряд ли получу опять визу в Швейцарию — по крайней мере пока длится конференция. К этому и направлена была вся игра англичан и французов, чтобы удалить нас и изолировать турок от нашего влияния. Поэтому, если против нас не предпримут мер «выселения», лучше мне не шевелиться…»
Но империалисты решили, как писал Воровский, все-таки его «выжить не мытьем, так катаньем». Редкий вечер проходил спокойно. Появлялись неизвестные личности и кричали под окном, угрожали, били камнями стекла, присылали анонимные записки,
Однажды через открытое окно в его комнату влетел камень. Он был обернут в плотную бумагу и перевязан бечевкой. Воровский развернул листок и прочитал угрожающие слова: «Убирайтесь вон, пока целы!» Написано было по-русски. Воровский позвонил в полицию и сообщил об угрозах. Но полиция ничего не предпринимала.
Воровский не страшился угроз: он был на боевом посту, защищал интересы своей Родины. Он не уедет, пока не прикажет Москва. Коммунист должен оставаться там, где ему велит быть российский пролетариат. Однако Воровский начинал сознавать, что сидеть в Лозанне, где его не хотели «признавать», не имело смысла.
«Пожалуй, даже унизительно, — думал он, — для такой державы, как Советская Россия, сидеть и ждать, когда господа смилостивятся». Воровский неоднократно телеграфировал об этом в Москву, в Наркоминдел.
«Сколько мне придется здесь сидеть, — писал он жене 9 мая, — сказать не могу… Делать здесь абсолютно нечего, пребывание наше — пустая трата сил и денег. Но на все мои длиннейшие телеграммы, разъясняющие положение, в ответ получаю упрямо-глупое повторение все того же вздора».
Указание покинуть Лозанну Воровскому было дано. Вся беда в том, что он его не получил, оно запоздало: связь была расстроена. Дипкурьерам не давали виз.
А над головой Воровского сгущались тучи. Фашистская лига в Швейцарии, куда входило немало русских белогвардейцев, распоясалась не на шутку. Полковник бывшей царской армии Полунин подготовил белогвардейца Конради, бывшего шоколадного фабриканта, учинить кровавую расправу над советским послом.
— Воровского надо обязательно убрать, — говорил Полунин. — Он очень ловок как дипломат. Лучше чем другие способен защищать в Лозанне русские интересы. Друг Ленина. В советских кругах растет его влияние. Важно убрать именно его. О последствиях не беспокойтесь. Все будет улажено…