嘉定十一年四月，黄榦奉旨依旧知安庆府，不就，入庐山访同门李燔、陈宓，并于白鹿洞书院讲学；十二月，主管武夷冲佑观，设局于建阳考亭，重修《仪礼经传通解》续卷，聚徒授业，讲授朱子学。嘉定十二年四月抵建阳，十月返家乡福州。嘉定十三年致仕不出，此后专事讲学，弟子日盛。嘉定十四年，黄榦去世。