Один из участников Ф. Шипунов рассказывал впоследствии, что, вернувшись с этого вечера, произнес знаменательную фразу: «Вот так бы и нам, как наши предки сбросили татарское иго, нам бы сбросить иго иудейско-масонское».
Вторая половина 1980 и 1981 года проходит под знаком брожения и собирания сил. Вечера и встречи, проводимые бывшими «Витязями», активистами ВООПИК и общества книголюбов, становятся все острее и напряженнее. На них ставятся все более серьезные вопросы. Примерно с 1981 года власти запрещают встречи под колокольней Знаменского монастыря. Однако движение было уже невозможно остановить. Создавалось совершенно новое по качеству патриотическое объединение. Критическая масса была, по-видимому, достигнута 17 июня 1982 года на вечере, посвященном 170-летию Бородинской битвы. Несмотря на то что он состоялся в небольшом зале, его эффект для будущего актива «Памяти» был не меньшим, чем эффект от вечера, посвященного Куликовской битве. В июне-октябре 1983 года прошла целая серия вечеров, на которых выступали Д. Жуков, В. Крупин, С. Куняев и В. Сорокин.
Организуя первые вечера, субботники и походы по историческим местам, будущее патриотическое объединение «Память» не имело названия. Собственно рождение названия «Память» произошло в ноябре 1982 года после вечера-размышления по книге В. Чивилихина «Память». Как сообщает первый председатель совета «Памяти» Г. И. Фрыгин, «стали думать о названии», и он предложил назвать объединение «Память». Это всем понравилось. Более того, на этом же собрании приняли решение просить Чивилихина возглавить общество «Память». Однако в связи с болезнью и смертью писателя это решение не было выполнено.
Первоначально «Память» именовалась любительским объединением. До марта 1982 года его главной площадкой был музей им. Н. Островского («салон Зинаиды Волконской»). Здесь «Память» провела не менее 15 вечеров. Однако на встрече с доктором исторических наук Н. Яковлевым наблюдателям из райкома партии не понравилась его резкая критика агента влияния США директора Института США и Канады Г. Арбатова. Критика эта была восторженно поддержана слушателями. Заседания в этом музее на некоторое время прекратились.
Зато у «Памяти» появилось еще несколько площадок: ДК Метростроя, ДК им. Чкалова и ДК им. Горбунова, а также ряд других культурных учреждений. С осени 1983 года «Память» начинает именоваться патриотическим историко-литературным объединением.
В 1983 году в актив объединения «Память», кроме перечисленных выше, вошли эколог, кандидат геолого-минералогических наук Ф. Шипунов, актриса О. Гобзева, преподаватель режиссуры массовых представлений Н. Детков, заведующая политическо-массовым отделом ДК им. Горбунова В. Мотова, преподаватель английского языка Е. Бехтерева.
В 1983 году совет «Памяти» добился официальной регистрации объединения в отделе культуры райкома партии при Дворце культуры им. Горбунова (ставшем известным под названием «Горбушка»), принадлежащем Заводу им. Хруничева. Официальная регистрация давала возможность проводить вечера «Памяти» в одном из самых известных Дворцов культуры, в зале на 1,5 тысячи мест. Но даже такого большого зала порой не хватало, чтобы вместить всех желающих.
Вечера, субботники, походы «Памяти» приобретают широкий размах. Интересы патриотического объединения охватывают все сферы жизни русского народа. В частности, следует напомнить ряд мероприятий для понимания сторон деятельности ранней «Памяти»: 1 июля 1982 года состоялся вечер памяти художника Константина Васильева, 6 сентября — встреча с председателем Русского клуба писателем Д. Жуковым, 14 октября — встреча с писателем В. Крупиным.
18 ноября прошел вечер размышлений по книге В. Чивилихина «Память». Среди выступающих были А. Кузьмин, В. Чалмаев и др. Книга эта стала настольной для русских патриотов. В ней открывалось величие России, ее героев и подвижников. Публикация книги стала важной вехой в возрождении русского национального сознания, пробудив у десятков тысяч русских людей теплые, благодарные чувства к жизни и деяниям своих героических предков. «Память, — писал Чивилихин, — это ничем не заменимый хлеб насущный, сегодняшний, без коего дети вырастут слабыми незнайками, не способными достойно, мужественно встретить будущее».