Храм во имя Пророка Илии построен в 1781 году на центральной площади города.Строительство Ильинской Церкви вел Козловский купец и меценат Иван Воронов. Воздвигнута церковь на самом высоком по рельефу месте. Это самое высокое здание в городе и в настоящее время, его высота 67 метров (22 этажа).
Ильинская церковь интересна в инженерном отношении. Зал первого этажа достигал высоты 7,8 м, а второго 17,8 м, площадью около 400 кв.м.,не имеет промежуточных опор. А её шпиль по утверждению некоторых исскуствоведов, является первым образом применения металлических конструкций для этих целей. Это памятник архитектуры. В 1946 г. в храме еще совершались Пасхальное богослужение. Здание принадлежало церкви до 1963 года. В 1964 г. храм был отдан под краеведческий музей. В 1992 году общественностью и администрацией города возвращен верующим.