吕氏故居位于新安县铁门镇薛村。建筑面积2114平方米，占地面积2250平方米。现存宅院两处，分别为南宅和北宅。南宅为三进三院，房屋共计10座，39间，北宅为三进三院，房屋10座26间。吕氏故居基本上存在了原布局形式和建筑模式，建筑的主体结构基本保持原貌，梁架和墙体保存较好。该故居对研究清代的建筑艺术、社会发展、科学技术和传统文化具有重要价值。