В конца XIX до начала XX века стеной заведовала особая комиссия, в состав которой входили губернаторы, архитекторы и чиновники. В это время были предприняты попытки по поддержанию стены в должном состоянии, но эти усилия не принесли должного результата. После 1812 года крепостная стена не имела постоянного куратора и переходила под опеку различных ведомств. Неопределенное положение сказывалось на состоянии стены – крепость со временем начинала обветшать и разрушаться, что начинало создавать угрозу для жителей города. В этой связи было принято решение разобрать участки стены, представляющие наибольшую угрозу для населения – башни и прясла. 

5 ноября 1902 г. Смоленская крепость отмечала 300-летие, к этому времени из изначально построенной стены длиной ок 6,5 км сохранились только 3 км 840м. После 1917 г. местные власти мало заботились о сохранении и поддержании исправного состояния стены, что отразилось также на ее внешнем виде. В 30-е гг. были разобраны башни Молоховская, Евстафьевская, Гуркина, а также крупные участки прясел на месте современных пл. Победы, ул. Бакунина, ул. М. Жукова. Кирпич, полученный при раскладке башен, использовался при строительстве сталинских пятилеток, в том числе гостиницы «Смоленск» и универмага на пл. Победы.

В период войны 1941-1945 гг. стена повреждена от действий советских и немецких войск (во время Смоленского сражения 10 июля – 10 сентября 1941 г. и освобождения города в сентябре 1943 г.). Стена уже не использовалась как фортификационное сооружение и не участвовала в боях. В 1943 году в городской стене между башнями были похоронены 12 офицеров, падших при боях за освобождение Смоленщины, позже в 1944 еще 24 военнослужащих, после завершения войны еще 5 человек. В 1968 некрополь вдоль стены получил название Сквера памяти героев. 

В послевоенное время башни (например, Громовая) служили для размещения людей во время проведения восстановительных работ города.
С 80-х гг. XX века процесс восстановления стены вышел на новый уровень – усилились меры по сохранению древнего архитектурного памятника. Но, к сожалению, современные материалы недостаточно укрепляют вековую постройку.