Торпедовцы не были режимщиками. Они умели играть, умели и погулять. И посиделки в элитных ресторанах в богемных компаниях рано или поздно должны были дать знать о себе. Валерий всё чаще начал выпивать. Ранее безупречный и прилежный на тренировках футболист стал свысока смотреть на дисциплину. Мог в компании случайных друзей уехать в Ленинград или Сочи и весело провести там время. Всё чаще красавца-футболиста видели в компаниях различных дам. Всё это не могло нравиться Валентине. И если сочиненный обществом роман с итальянской киноактрисой Софи Лорен Валентина справедливо восприняла как шутку, то частые исчезновения Валерия и слухи о его мелких победах разрушали некогда счастливую семью. Не остепенился Валерий и после рождения дочери Екатерины.
Высочайшее мастерство еще долго компенсировало не самое трепетное отношение к дисциплине. В середине шестидесятых Валерий Воронин по-прежнему оставался сильнейшим футболистом страны. Более того, многие зарубежные клубы были не прочь пополнить свои ряды русским футболистом. Но это было невозможно в те годы. А бежать за границу было неприемлемо для самого Воронина. Однажды в зарубежной поездке он прокомментировал якобы поступившее приглашение от мадридского «Реала»: «Надо подумать». Это заставило руководителя делегации изрядно понервничать. Возможно, Валерий чувствовал, что играть в чемпионате СССР ему становится скучно, хочется попробовать чего-то нового. Но вряд ли он всерьез расстраивался из-за этого. Тем более что осуществилась его давняя мечта. Вернувшемуся из мест заключения Эдуарду Стрельцову разрешили наконец выступать за «Торпедо», и теперь Валерий мог играть со Стрельцом.
В том же 65-м в Москву должны были приехать бразильцы с самим Пеле. Встреча с действующими чемпионами мира вызвала огромный ажиотаж — все билеты в «Лужники» были раскуплены. Валерий Воронин подарил одну контрамарку случайному знакомому из Ленинграда, сказав: «Матч будет скучным, Пеле будет незаметен, потому что его закрою я».
Можно видеть в этих словах бахвальство. Но на самом деле Воронин тщательно готовился к встрече с «королем футбола», изучал финты и хитрости бразильца, даже смотрел киноленты с его игрой. Валерию не терпелось помериться силами с лучшим футболистом планеты, доказать, что он как минимум не слабее.
И вот 4 июля 1965 года сборные СССР и Бразилии сошлись на переполненной Большой спортивной арене «Лужников». Валерий Воронин, словно тень, следовал за Пеле, пытаясь выключить бразильца из игры. Но всё вышло с точностью наоборот. Бразильцы выиграли 3:0, два мяча в составе победителей забил Пеле, переигравший своего опекуна. Валерий же, поглощенный нейтрализацией лидера бразильцев, выпал из созидательной игры.
После игры огорченный Воронин сказал: «Такие люди, как Пеле, вообще не должны играть в футбол. Потому что ему нет равных». Проигранная дуэль больно ударила по самолюбию Валерия. Но не факт, что она сломала его, как кое-кто считает по сию пору. Во-первых, Воронин не стал играть хуже, не впал в депрессию. А во-вторых, в том же 65-м Воронин и Пеле снова встретились на футбольном поле. Матч проходил в Рио-де-Жанейро, на легендарном стадионе «Маракана» при аудитории в 130 тысяч. Воронин уже не стал опекать «короля футбола» персонально — эта миссия была возложена на Валентина Афонина, — а занялся своей привычной работой в центре поля. По ходу встречи сборная СССР проигрывала 0:2 — один из мячей забил опять же Пеле. Но наши сумели отыграться, а Валерий стал одним из лучших на поле. И наконец, некоторый реванш был взят на чемпионате мира 1966 года, где сборная СССР завоевала бронзовые медали, а Валерий Воронин получил из рук королевы Елизаветы II приз «самому элегантному футболисту». На первенстве мира Валерий нейтрализовал венгра Флориана Альберта и португальца Эйсебио, попал в символическую сборную. И мало кто знал, что Николай Петрович Морозов не хотел ставить Воронина в основной состав, что между тренером и игроком существовал конфликт. Но каждый сделал шаг навстречу, и сборная СССР добилась своего наивысшего успеха на чемпионатах мира.
Рассказ о двух матчах против Бразилии будет неполным без впечатлений самого Валерия Ивановича, изложенных на страницах еженедельника «Футбол»:
«Может быть, мы не отдавали себе отчета об истинной силе бразильцев? Не чувствовали их превосходства в технике? Забыли, что именно они дали миру ставшую теперь канонической схему игры? Что, наконец, они двукратные чемпионы мира? Всё это мы помнили. Мы были готовы ко всяким неожиданностям. А самой большой неожиданностью оказался Пеле. Из него уже давно сделали футбольного идола, и мне казалось (а живого Пеле я впервые увидел в этом матче), что его мастерство есть плод фантазии идолопоклонствующих. Как видите, здесь в недооценке главного козыря бразильской команды присутствовал элемент психологизма».