后来，官府屡征他为官，均不就。遂隐居收徒，以教授弟子为乐。他去世之后，其门人谥其为“玄儒先生”，时有58人全都是以前的下级官吏或赋闲绅士，捐资为其立碑。《娄寿碑》全称《汉玄儒先生娄寿碑》，东汉灵帝熹平三年（174年）刊立。据考，传世较真之旧拓本为宋拓剪裱本，即华氏真赏斋旧藏本，有明清名家丰道生、朱彞尊、何焯、钱大昕、龚自珍、何绍基、端方等题跋及观款，足见《娄寿碑》名声显赫。

附《娄寿碑》释文：“先生讳寿，字元考，南阳隆人也，曾祖父，攸《春秋》，以大夫侍讲，至五官中郎将，祖父大常博士，徵朱爵司马，亲父安贫守贱，不可营以禄，先生童孩多奇，岐嶷有志，捥发传业，好学不厌，不攸廉隅，不饬小行，温然而恭，慨然而义，善与人交，久而能敬，荣且溺之耦耕，甘山林之杳蔼，遁世无闷，恬佚净漠，栖迟衡门，下学上达，有朋自远，冕绅莘莘，朝夕讲习，乐以忘忧，郡县礼请，终不回顾，高位厚禄，固不动心，粗绛大布之衣，粝答蔬菜之食，蓬户茅宇，棬枢瓮牖，乐天知命，权乎其不可拔也，是以守道识真之士，高尚其事，乡党州邻，见亲爱里，年七十有八，熹平三年，正月甲子，不禄，国人乃相与论德处谥，刻石作铭，其词曰：皇矣先生，槁德惟明，优於《春秋》，玄嘿有成，知贱为贵，与世无争，栖迟衡门，礼义滋醇，穷下不苟，知我者天，身殁声鬯，千载作珍，绵之日月，与金石存”[清 严可均辑《全后汉文》 卷一百三 玄儒先生娄寿碑（熹平三年正月）]。