宋徽宗·趙霽是端州的國王，端州是他的封地。他即位後，端州被提升為官邸，禦書稱“肇慶府”。宋忠和元年(1118)，為了供奉禦書，在官邸前修建了壹個高臺，取名禦書屋。明日，順順六年(1462)，縣令黃宇將重修，更名為利安樓。明朝末年(1646)，桂王朱由朗在反清時即位，改建成永明宮。建國之初，因其顏色紅，俗稱紅樓。為了報時，古力樓曾陳列過銅壺滴水、甘寧銅鐘、大藤鼓等計時器。樓後的衙門是古端州行署，宋代名臣包拯曾在此任職三年，政績卓著，以清廉著稱。目前，李傑樓橋臺拱門上還掛著壹塊“古名郡”的牌匾和壹副對聯“邢燕朗耀光山海，燕竹清風播古今”。