次日用罢早餐聚齐出发步行赶往鼓楼。鼓楼始建于明洪武十三年，比钟楼早建4年。 楼上原有巨鼓一面，每日击鼓报时，故称“鼓楼”。鼓楼横跨北院门大街之上，和钟楼相距仅200米，互相对应。

主持修建鼓楼的人是长兴侯耿炳文、西安知府王宗周，据说是在微雨朦胧之中为鼓楼工程奠基的。清朝、乾隆四年曾先后两次重修。据乾隆五年《重修西安鼓楼记》载，上年陕西小麦丰收，“陇有赢粮，亩有遗秉，民不俟命”，出现了“男娶女归，礼兴讼息”的太平景象，于是效法古事“盛世修史，丰年盖楼”，重整鼓楼。长安县令王瑞具体负责修缮事宜。

明代的长安城周长11.9千米，面积8.7平方千米，鼓楼地处城中部偏西南，为使鼓声能传遍全城，就必须建造高楼，设置大鼓。明、清两代，鼓楼周围大多是陕省、府署的各级衙门，这些衙门办公和四周的居民生活都离不开鼓声，鼓声亦成为当时人们最熟悉的声音。咸宁名儒李允宽所书写的“声闻于天”的匾额，画龙点睛，说明了鼓楼的实际意义。楼内设有楼梯，登临楼上，凭栏便能眺望全城景色。鼓楼是城内明清建筑物的主要标志和代表之一。

鼓楼建于高大的长方形台基之上，楼基面积1924平方米， 占地面积1998.8平方米， 为砖木结构，通高34米。高台砖基座东西长52.6米，南北宽38米，高8米。基座南北正中辟有高宽均6米的拱卷门洞，供人车出入，南通西大街，北通北院门，登陆踏步已由原来的西北侧改为如今的正东侧。

鼓楼为梁架式木结构楼阁建筑，上下两层，重檐三层。正面（南向）为七间。进深三间，四周回廊深度各为一间，按楹柱距离计算，正面为九间，侧面为七间，即古代建筑中俗称的“七间九”。屋面覆盖以剪边灰瓦，楼基除两端尾外，不加其它装饰，尽显雄浑庄严。

鼓楼建筑形式是歇山式重檐三滴水。鼓楼呈长方形，分上下两层。第一层楼上置腰檐和平座，第二层楼为重檐歇山式顶，上覆灰瓦，绿色琉璃瓦剪边。上下两层面阔各为7间，进深均为3间，四周环有走廊。楼的外檐和平座都装饰有青绿彩绘斗拱，使楼的整体显得层次分明，华丽秀美。

鼓楼的构造技术，在应用了唐朝风格、宋代建筑法则的基础上又有不少创新。全楼结构无一铁钉，楼檐和平座都使用了斗拱构造原理，外观楼体古雅雄健，富有民族特色。

屋顶是中国古代建筑之冠冕。早在汉代，劳动人民就创造出多种如庑殿、歇山、悬山、攒尖等形式的屋顶。在君主专制社会里，屋顶有着严格的等级制度，重檐即是统治阶级为提高其权威而独占的一种形式:重檐庑殿为最尊，重檐山次之。鼓楼的屋顶形式即“歇山顶”式，与天安门等同，但比其还高出一米。

建筑彩绘是传统建筑的主要特征之一。以浓艳彩描绘的各种图案，既有装饰效果，又可保护木材。在君主专制社会里，建筑色彩使用同样具有严格的等级限制:金、珠、黄最尊贵的和玺彩绘为第一等，只用于帝王贵族象征皇权的建筑；青、绿的旋子彩绘次之，用于文武百官的宅第；苏式彩绘则位居第三。鼓楼上分别使用了和玺彩绘和旋子彩绘，并绘有沥粉金龙，成为古建筑彩绘的精品之作。 纵观整个大明王朝，鼓楼的建筑形制、级别之高甚至超过了当时的国都南京。

在鼓楼第三檐下，南北各悬匾额一块，南面为“文武盛地”，北匾为“声闻于天”。

“文武盛地”匾最初是重修鼓楼竣工后，陕西巡抚都御史赵可怀于明万历十八年所题。

清乾隆五年鼓楼重修后，相传陕西巡抚张楷模仿乾隆皇帝的“御笔”为鼓楼书写南匾：“文武盛地”四字；北匾“声闻于天”则相传是咸宁县“名儒”李允宽所书。两匾长8米，宽3.6米，为蓝底金字木匾。南北两幅匾额曾经被誉为两颗“明珠”镶嵌在鼓楼之上，与鼓楼一同饱经风雨的历练。

鼓楼陈设有自古以来各式各样的鼓。有陶鼓、鼍鼓、石鼓、盾鼓、虎座鸟架鼓、跨鼓、战鼓、都昙鼓、答腊鼓、象脚鼓、铜鼓等几十种。