院内有一块巨石，长二丈四，宽六尺，高丈二，名青芝岫。该石原在“房山之阴”，后被明代爱石成僻的米万钟发现，想“置之海淀勺园中”。于是“车重轮，马十驷……百夫曳之登车，七日始出山，又五日……”才运到良乡。后因种种不利因素，他托言财力耗尽，不能再运，遂弃此石(实有二块)于路旁。故该石俗称败家石。100多年后，乾隆皇帝谒拜西陵路过良乡发现此石。当时刘墉附会说，此为房山灵石，因不愿去米家才停卧于此。乾隆遂把此石运往乐寿堂。因“水木自亲”之门太窄(只一米多宽)，故破门而入。为此，乾隆之母大发雷霆，认为此石是不祥之物。为挽此僵局，刘墉又说，此石似灵芝，能添瑞气，象征人寿年丰，皇基永固。乾隆赐题“青芝岫”，东曰“玉英”，西曰“莲秀”，太后才满意。乾隆所题《青芝岫诗》还残留石上。