平阳鼓楼金、元、明、清皆重修过，但楼体仍保持原建 筑特点。楼的平面呈正方形，四边各40米，面积1600平方米，通高40.5米。四面没回廊。基座全用青砖砌筑，座高八米，大中楼基座券砌门洞，十字相交，通连四条主街。门洞上方各嵌有依明万历三十一年(1603年)原刻复制的巨形石雕匾额，分别为"东临雷霍"、"西控河汾"、"南通秦蜀"、"北达幽并"。楼基东西两侧各建有门楼，东曰"远眺"，西曰"云梯"。入门楼，沿级再登，拾级而上至中楼台坪及中、上楼层，近观远眺，别有风光。大中楼门厅匾额题词为明清两代所传，由徐向前元帅、著名书法(画)家启功、李锋、董寿平、段云、舒同、赵朴初诸先生书写，名人名作荟萃，胡为鼓楼增辉。

门洞上方各镌有石雕匾额，依其四面分别为"东临雷霍"、"西控河汾"、"南通秦蜀"、"北达幽并"。这一组按明万历三十一年(1603)原刻复制的匾文，苍劲古朴，概括了平阳府的重要地理位置。大中楼基座的东西两侧，均建有石阶门楼。登40级台阶，可上到近10米高的台坪，并由此入一厅，上二层，俯瞰全城。楼阁乃木构巨制，为二层、三檐、四级滴水，十字歇山顶明式建筑，共有九条屋脊，即一条正脊、四条垂脊和四条戗脊，因此又称九脊顶。由于其正脊两端到屋檐处中间折断了一次，分为垂脊和戗脊，好像"歇"了一歇，其上半部分为悬山顶或硬山顶的样式，而下半部分则为庑殿顶的样式。歇山顶结合了直线和斜线，在视觉效果上给人以棱角分明、结构清晰明了的感觉。

屋顶两侧形成的三角形墙面，叫做山花。山面有博风板，山花和博风之间有段距离，可形成阴影。为了使屋顶不过于庞大，山花从山面檐柱中线向内收进，屋脊上有各种脊兽装饰，其中正脊上有吻兽或望兽，垂脊上有垂兽，戗脊上有戗兽和仙人走兽，其数量和用法都是有严格等级限制的。其中重檐歇山顶等级高于单檐庑殿顶，仅低于重檐庑殿顶，而单檐歇山顶低于单檐庑殿顶，只有五品以上官吏的住宅正堂才能使用。歇山顶分单檐和重檐两种，所谓重檐，就是在基本歇山顶的下方，再加上一层屋檐，和庑殿顶第二檐大致相同。例如天安门、故宫的太和门、保和殿、乾清宫等就是重檐歇山顶，妙应寺山门、智化寺智化殿、台湾台北府城北门则为单檐歇山顶。

鼓楼总高43.75米。支撑两层楼阁的12根通天大柱，直径均在一米左右。游客睹之，无不惊叹:"非皇家殿宇无以比"一层厅顶为天井式彩绘格板，精工描绘了孔雀开屏、祥龙盘旋的民族传统图案，金碧辉煌，犹如宫殿;二层梁架拱顶，形如八卦藻井，四壁皆为格棱窗，棱窗上部的木格部位，以帝尧传说为主，描绘上古故事60余幅:或尧王访贤，或大禹锁蚊，或许由洗耳，无不色彩古雅，笔墨传神。二厅外有回廊，出厅凭栏四顾，临汾之山光水色尽收眼底:鸟瞰市内，大街小巷姹紫嫣红，花果城中铺锦绣;放眼郊外，远山近水叠翠流碧，麦棉乡里溢金银。大中楼究竟始建于何代，尚无文献确证。据《北史李崇传》记载:"兖土多劫盗，崇令村置一楼，楼悬一鼓，盗发之处，双槌乱击，四面诸村闻鼓皆守要路，俄顷之间声布百里，便尔擒送。