溫州的橋樓經歷了幾千年的風雨。好像最美的時候是宋建言四年二月(1129)。那是壹個戰火紛飛的時代。金兵入侵中原，不久攻占汴京(今開封)。昏庸的惠帝和秦已經被俘虜了。康王趙構(宋徽宗九子)，征戰海外，擁兵萬人，稱帝，與並稱南宋。後南遷揚州為都。金兵再渡黃河，大規模伐宋，追趕、倉皇出逃揚州，途經鎮江、蘇杭，在金、的追蹤下被迫繼續南下，途經越州、明州，最後到達溫州，住在普濟寺。溫州太守陸治原和士大夫薛弼要求高宗遷入縣城。農歷2月17日，高宗從江心遷至溫州，錦衣衛從拱北門(今朔門)進入。父親和老百姓都做了花，燒了香歡迎他，然後經過主街，五馬街，新街，穿過死樓入住大州治(溫州衙門)，改州治衙門為皇宮。
當歷史的年輪滾動到元朝的時候，蒙古貴族統治者害怕漢人的對抗，於是下令將全國的城市全部拆除，溫州內外城也未能幸免。到了元十三年(1353)，它的東、西、北四面城墻和三門都被破壞了，只有南城寶塔保存了下來。