志未酬，可犯言直谏的忠亮与勇斗奸党的刚直，却是值得称道的。总之盖棺之时悼词可以写上“吴潜同志的一生，是忠君报国的一生，是勤政爱民的一生，是刚正不阿的一生，是令后人敬仰的一生！”
吴潜娶溧水世家平氏为妻，生璞、琳、玠，卫国夫人平氏薨，其不复娶，亦不畜婢，故在世仅有三子。三子中，吴璞在历史上较有作为，淳祐四年进士，初授校书郎，改除嘉兴府通制、沿江镇抚使。吴璞又有长子宝谦，授承务郎平江路治中；次子宝礼，仕转运使。
吴曦乃是璞之长女，生于官宦之家，其自然是知书懂理，精通文墨。而作为嫡房长女，自然要自幼学习打理家务，据说其持家有方，做事公正。且上敬父祖，下善待弟妹，贤良淑德，处事有道，族中上下皆十分信服。看起来哪个都不错，却把赵昺给难住了……