赤城鼓楼建于明正德四年，砖木结构，清代和1985年重修。墩台东西长，南北略短。中间有南北向高大拱形门洞，正面门额刻“寯明”二字，背面门额刻“控驭”二字。墩台背面两侧各开一个拱劵门，内有台阶可直达楼台，台上四周有女儿墙。楼内一侧设木质阶梯可上顶楼，楼体重檐歇山顶回廊式建筑，斗拱为重昂五铺作，其造型有别于一般明代建筑。顶楼檐下悬挂“霞城翠秀”金字大匾，使巍然矗立的鼓楼显得庄严肃穆，颇为壮观。鼓楼后面的墙根下，零散放着些残碑，看去古朴浑厚；希望它们可以重新站立起来。