西安市鐘鼓樓博物館的前身是1953年成立的西安鼓樓陳列館，在此基礎上，1957年成立了西安市鐘鼓樓保管所，2008年正式被命名西安市鐘鼓樓博物館，並加掛牌子。
西安鐘樓和鼓樓，均為明代建築。鼓樓始建於明洪武十三年（1380年），鐘樓比鼓樓晚建4年，原位於鼓樓西邊，200多年後因西安城大規模擴建，在時任陝西巡撫龔懋賢主持下，於明萬曆十年（1582年）遷於今址，與鼓樓遙相呼應，成為西安城市的中心標誌和永恆的空間坐標。
從1953年西安鐘鼓樓陳列館成立至今，西安鐘鼓樓博物館已走過了60多載風雨。作為西安城的主要象徵形象和標誌性建築物，鐘鼓樓曾接待了周恩來、朱德等國家領導人和眾多中外著名人士，1996年被國務院列為全國重點文物保護單位。
多年來，在上級政府的領導下，鐘鼓樓博物館全體幹部職工始終致力於西安鐘鼓樓的保護、管理和利用工作，做好古建築本體保護的同時，不斷完善館藏的數量和質量，現有齊白石等名人字畫、瓷器、家具等三級以上文物近百件組，形成了以《600年與60年——西安鐘鼓樓博物館實踐》為基本陳列，《鼓舞中國——鼓文化展》《館藏明清家具展》為常設陳列，並輔以每年4-6個內容豐富的特別展覽的展覽體系和古建特色青少年系列教育活動，使這兩座600多年的文物建築煥發著新時代的風采，為越來越多的公眾感受古建魅力和傳統文化貢獻著積極的力量，2016年接待遊客量達190萬人次，成為古城西安文化的永恆坐標。
西安鐘樓始建於明洪武十七年(1384)，是一座重檐三滴水式四角攢尖頂的閣樓式建築，樓體建在用青磚、白灰砌成的方形基座上，高度為36米，整個建築顯得宏偉、壯觀。
西安鼓樓坐落於北院門街的南端，與鐘樓相望，始建於明洪武十三年(1380)。樓分上下二層。第一層樓身上置腰檐和平座，第二層樓為重檐歇山式頂，上覆灰瓦，綠色琉璃瓦剪邊。樓的外檐和平座都裝飾有青綠彩繪斗拱，使樓的整體顯得層次分明，華麗秀美。