Напротив Громовой башни в тени деревьев приютился памятник Федору Коню, легендарному смоленскому зодчему, без которого местная крепость выглядела совсем иначе. Достоверных сведений о жизни строителя в летописях не сохранилось, как не осталось и никаких портретных изображений Федора Коня. Известно лишь, что в юношеском возрасте он побывал в Европе, учился у пизанского архитектора Иннокентия Барбарини.
Вернувшись в Россию, почти сразу же стал «государевым мастером» – руководил строительством Белого города в Москве, но, не сумев ужиться с дьяками, был направлен царем в Смоленск. В городе над Днепром зодчий построил Смоленскую крепость, после чего по ложному доносу сослан царем Борисом Годуновым в Соловецкий монастырь. Совершив побег из обители, Федор Конь навсегда затерялся (либо бесследно сгинул, либо дожил до старости, не выдавая своего мастерства).
В память о мастере, создавшим облик древнего Смоленска, городские власти решили установить монумент в его честь. Скульптор О. Комов изобразил Федора Коня в образе немолодого мужчины, который в глубокой задуме присел на каменный блок. Левая рука зодчего упирается на большой деревянный циркуль, без которого в былые времена трудно было установить идеальные пропорции зданий, а сам мастер смотрит на спроектированную крепостную стену, словно придумывает улучшения для всей постройки.
Торжественное открытие монумента состоялось в 1991 году.