После революции здесь организовали несколько мелких колхозов.
В годы фашистской оккупации в районе села действовали партизаны полка имени С. Лазо. В феврале 1942 года они разгромили немецкий гарнизон, размещавшийся в Балтутине. Партизаны ворвались в село в три часа утра. Фашисты выскакивали раздетыми из хат и попадали под пулеметный п автоматный огонь. Убитыми враг потерял около 300 человек, а 86 гитлеровцев сдались в плен. Захватив богатые трофеи, партизаны благополучно возвратились на свою базу.
В центре села находится братская могила, в которой захоронены советские люди, отдавшие свою жизнь в борьбе с врагом.
В селе организован историко-краеведческий музей. В память павших на войне односельчан в Балтутине воздвигнут памятник-обелиск.
Ельня - одно из древнейших поселений Смоленской области. Упоминается в документах XII века. В 1239 году поселение подверглось набегу монголо-татарского отряда, который па пути в Смоленск был разбит смолянами у села Долгомостье. К началу XV века Ельня пожалована «на вечность» пану Сапеге. Но вскоре она была возвращена в состав Русского государства. Во время польско-шведской интервенции Ельню разорили и захватили войска польского короля. Однако в 1654 году, в период войны с Польшей, начавшейся после воссоединения Украины с Россией, она снова отошла к Руси. В 1776 году Ельня стала городом и уездным центром Смоленского наместничества, затем заштатным городом, а с 1802 года вновь уездным центром.
Крестьяне Ельнинского уезда приняли активное участие в борьбе с французскими захватчиками в период Отечественной войны 1812 года. Они создали несколько партизанских отрядов, поставляли армии продовольствие и лошадей для подвозки грузов. Во время контрнаступления русских войск в Ельнинском уезде действовали также армейские партизанские отряды (отряды из частей регулярных войск) Дениса Давыдова, А. Сеславина и А. Фигнера. В районе деревни Ляхово 9 ноября 1812 года они окружили бригаду французских войск под командованием Ожеро. Командир бригады, 60 офицеров и более 2 тысяч солдат сдались в плен. Через Ельню прошли главные силы русской армии. В городе некоторое время находился штаб М. И. Кутузова.
В Ельне жила сестра М. И. Глинки М. И. Стунеева, и композитор часто останавливался в ее доме. Этот дом в перестроенном виде сохранился до настоящего времени.
В 1900 - 1903 годах в Ельне действовала небольшая социал-демократическая группа во главе с высланным из Петербурга студентом В. Ю. Фридолиным. Рабочие-железнодорожники распространяли газету «Искра», революционную литературу и прокламации. В период революции 1905 - 1907 годов в Ельнинском уезде происходили массовые выступления крестьян против помещиков.
Сразу же после Февральской революции в Ельне возник Совет солдатских депутатов, который 25 апреля 1917 года объединился с только что созданным Советом рабочих и крестьянских депутатов. Наиболее видными деятелями Ельнинского Совета рабочих, крестьянских и солдатских депутатов были С. В. Иванов, член РСДРП с 1904 года, освобожденный в марте из смоленской каторжной тюрьмы, и С. С. Филиппов. Летом 1917 года Совет принял ряд постановлений о передаче помещичьих земель крестьянам, о введении восьмичасового рабочего дня. 2 ноября в Ельне была установлена Советская власть, а 25 августа 1918 года создана уездная организация РКП (б).
Яркие страницы истории Ельни связаны с Великой Отечественной войной 1941 - 1945 годов.
Менее чем через месяц с начала войны, 18 июля, у города появились немецкие танки. Обороняли район войска 24-й армии под командованием генерал-майора К. И. Ракутина. Но силы врага вдвое превосходили наши, поэтому в результате неравных боев советские войска были вынуждены укрепиться в 18 километрах восточнее Ельни. Линия фронта, расчленившая район на две части, образовала знаменитый ельнинский выступ. Однако использовать свое преимущество гитлеровцы не смогли. Части Советской Армии предприняли наступательную операцию. В течение 26 дней шли упорные кровопролитные бои, во время которых войска 24-й армии при поддержке авиации полностью уничтожили ельнинскую группировку немецко-фашистских войск и ликвидировали ельнинский выступ. 6 сентября над Ельней снова взвился красный флаг. У врага был отбит первый советский город.
Здесь, под Ельней, родилась советская гвардия.
Ельнинская операция была одним из важных этапов Смоленского сражения, в ходе которого фашистское наступление на Москву было задержано на два с половиной месяца, и гитлеровский план «молниеносной войны» дал первую трещину.