宋淳熙元年(1174年),吕规叔创建鹿门书院。吕规叔曾官至监察御史,南宋初年,金国入犯,吕规叔因主战而得罪秦桧,被贬到义乌,虽然后来得以昭雪,曾有机会再当官,但他看不惯官场腐败,无意仕途。因为其夫人是嵊州人,知道嵊州山水秀美,便举家迁到鹿门,并带来一批能工巧匠,建造书院,教读童子,全心弘德育人。就这样,鹿门书院的一脉文风得以从宋、元、明一直延续到清末,有了800多年的传承,后被授予“省级文保单位”称号。