巢湖石有著悠久的開發利用歷史。上海豫園裏有壹塊巢湖石，高三尺多。孔相連，壹孔焚香，孔皆冒煙。相傳這塊石頭產於隋朝初年的尹平。宋代費周《梁蠻誌》中的“米元璋拜石”，北宋著名書法家米芾在“無為軍”時所拜的“世雄”、“張世”，就是巢湖石(無為今安徽巢湖無為縣)。至今這塊石頭還留存在武威米公廟，因為年代久遠，已經失去了往日的輝煌。因此，巢湖石又被稱為“武威軍石”，編入《雲林石譜》壹書。北宋年間，巢湖石被運到揚州建造園林假山。據民間傳說，宋徽宗當時正在修建艮嶽。由於人們對石頭的需求過大，而太湖周邊地區出產的太湖石又很短缺，官員們就私自收集、運輸壹些巢湖石來替代。目前，北京等地的園林中有很多巢湖的美石。
從外觀上看，巢湖石和太湖石很像，只是顏色比較紫。除了太湖石外形的奇特和“薄、皺、透、漏”的共性外，巢湖石還具有化石附著、圓腔、奇筋異脈、姿態粗獷、能量精細、巨大異常突起等特點，成為人們青睞的雙重觀賞石。
巢湖石作為園林中砌築和造景的優質石材，可用於堆疊大型臨水或夏季假山、大型幹山等。，而且是精致華麗。其高大美觀，可單獨用於立體花壇，形成壹石壹景；小巧玲瓏，也可用於室內告白，供收藏者收藏把玩(圖2.46)。