В подвале северо-восточной наугольной башни был отведен под хранение «государевой зелейной казны», то есть запасов пороха, здесь же хранился свинец для отливки пуль. Так возникли два варианта названия башни: Казенная и Зелейная.
Наугольные башни русских каменно-кирпичных крепостей, как правило, имели вид цилиндра или многогранной призмы. Благодаря такой форме они менее, чем прямоугольные, повреждались при артиллерийском обстреле. Наугольные башни выступают за периметр стен, примыкая к стыку лишь одной гранью. Так обеспечивалось ведение кругового и флангового огня вдоль прилегающих стен из бойниц, расположенных
веерообразно на каждом ярусе. Башня имеет три яруса боя. Один вход в башню ведет с территории кремля, второй – с боевого хода.