紹興呂府是明代官員呂坤的府邸。它建於明朝中期，位於浙江省紹興市臥龍山山頂。它是由明朝權臣嚴嵩建造的，後來被燒毀。我們現在看到的呂家樓是清朝同治年間呂的後人在原址上重建的。王陽明故居遺址位於上野寺以南、西溪河以東、王爺弄以西、呂府以北。2020年5月中旬起，經國家文物局批準，省文物考古研究所和市文物考古研究所對王陽明故居遺址進行考古發掘。因此，紹興呂府遺址與王陽明故居是兩個不同的歷史遺跡，不存在呂府成為王陽明故居的情況。