吴渭,吴芾之侄。一岁丧父,备尝人间辛酸,后富,乐于赈灾扶贫。家中建有瞭望楼,每遇大雪,登楼见有家无炊烟的,即派人送去粮食;苍岭至县城路窄难行,出资铺砖砌宽。乾隆九年(1173)大饥,散私钱200万,发粮2000石施赈,所济甚众。吴芾曾有诗云:“吾家渭侄非常儿,读书事母成家肥。此心但欲济邻里,身外浮名非所希。”郡县长官多次上报他的事迹请赏,都被他谢绝。后来平使朱熹曾著文表彰,并补次子吴椿为文学(官名)。