又称大钟楼，座落在惠福西路坡山（参见坡山古渡遗址）上，即今五仙观后面。兴建于明洪武七年（1374年）至十一年，由当时广东行省参知政事汪广洋组织修筑。楼宇如同一个巨型方井，内置一口巨钟，其建筑目的是用于火警。
禁钟楼自明初建成以来，几经兴废，今楼中木樑上仍有清乾隆戊申年（1788年）重建字样。20世纪40年代，楼宇坍塌无存。今所见为1949年后重建，基本保存原貌。

楼高17、45米，楼基呈方台状，用红色砂岩石砌成，中空，四面有拱形门洞对称贯通。台顶为一个四面敞开的木条构架，重檐歇山、琉璃瓦盖之下是一个轩敞的楼台。顶部巨樑上悬挂着一口巨大的青铜铸钟，钟口正好与楼基方井形洞口相对。方井形的楼基实质是巨钟的一个共鸣器，钟声通过井洞激荡旋绕，音质更为雄浑悠扬。相传巨钟一敲，声播三城（明三城）。
这口巨钟是广东现存最大的一口古钟。高4、04米，钟口直径2、1米，重约5吨。钟上刻有篆体铭文，注明为明洪武十一年（1378年）“广东等处承宣布政使司铸造”。清屈大均《广东新语·器语》谓此钟颇有“煞气”，铸成后不敢敲响。“有司命击之，城中婴儿女死者千余……越一年（1646年）城（为清兵攻）破，乃止勿击”。
禁钟楼被誉为“岭南第一楼”，这并不是因为它巍峨高耸，而在于它独特的建筑风格和奇妙的音响效果。