“庶几乡先哲理学文章、忠贞孝友得萃一堂,有志之士肄业其间,益生兴起,岂非我东盛举也哉?”乾隆辛丑年(1781)春夏之际,一纸《募建白云书院》在东城儒林、望族之间传阅。此倡议书出自雅溪卢氏东园先生卢衍仁之手。这年春末,他和同仁约东阳县令王照麟到白云洞访遂初堂遗址,提议于遂初堂旧址兴建景行堂,崇祀许谦、张国维等先贤,并在白云洞左侧创设白云书院。张氏后人欣然把白云洞与所留地基捐为公用。经卢氏发动,仁人志士争相捐助,次年秋天白云书院顺利建成,远近弟子争相来学。县令王照麟在捐赠册上题词“尊贤育才”,以彰显此事。之后,卢衍仁还一度筹谋扩大书院田立,便于维护书院日常运作。
清代嘉庆末年,书院渐圮,学子已无法修学其间。道光戊申年(1848)清末,雅坑张振珂赋诗《议重建白云书院》,呼吁“振起斯文儒者事”,认为重光白云书院是儒林分内之事。为此他筹备了10年,于咸丰乙卯年(1855)与同仁重新修葺了白云书院,规模较之前大为扩展,内有景行堂并东西厢房,奉祀先贤;外有书院11间、庖湢3间,供学子学习生活之用;还购置良田40多亩作为院产,每月初一、十五给优秀学生发放奖学金。张振珂也坚持在白云书院教书授课,又建立崇文会,倡议学子追求正统之学,崇文向善。
此时,距东园先生重建白云书院已70多年。当此之际,“浙东书院稀少,而人文科第也逊也”,张振珂之举,却让世人看到了东阳对民间教育的顽强坚守!