越过衙府即到达寨城公园八景之一的南门怀古。「九龙寨城」于一八四七年建成，为加强防御，城墙上筑有六个瞭望台；而另一道宛如万里长城的副城墙，则沿北面山丘向上伸延。但「固若金汤」的石墙，在日治期间被日军拆毁，石块供扩建启德机场之用。

战后，寨城因缺乏政府监管而沦为罪恶温床。香港政府在一九九四年四月花了整整一个月，用大铁锤的推土方式，清拆寨城内缺乏监管和无稳妥地基的楼宇。当时在南门原址，发掘了分别刻有「南门」及「九龙寨城」的花岗岩石额。此外，城墙残存的墙基、一条沿内墙建造的排水沟及旁边的石板街亦先后出土。

昔日南门遗址，今天已列为法定古迹，游人除可缅怀过去，亦可从当年遗下的楼宇钢筋水泥，窥见在「三不管」年代，寨城内三万多低下阶层人士的居住环境。