大异在两广时，先在曲江张九龄故宅建湘江书院；继在桂林创宣城书院，以纪念张栻与吕祖谦。58岁，上章请退，调任秘书阁修撰太中大夫，提举崇禧观。年82卒。