叠翠书院位于泰安寺后，建于嘉靖二十年（1514年）。监察御史肖祥曜巡按居庸关时，见贡士孙汝贤带领诸生泰安寺僧舍“学业其中”，苦苦诵览，便命居庸分守在寺后修建房舍，共十六间，当中为“聚乐堂”，为师生研习讲读的地方，其余则作为师生宿舍。 由于房舍面对关城东侧的叠翠峰，所以便取名叠翠书院。 叠翠书院是供守关将士子弟读书的地方，由于明朝施行兵甲世袭制，因此书院以传援兵法为主，以供学子们将来继承父兄在军中的职务。