顾老太爷膝下有一子二女，均是已逝的顾太夫人所出。
顾老太爷年轻时官运坎坷，几乎把所有的精力都放在了仕途上，与子女的感情并不深厚。儿子顾亦棋在妻子的宠溺下长成了一个只知道飞鹰走马的纨绔子弟，功名上毫无建树，至今还只是个秀才。
当初议亲的时候，顾太夫人本来想为儿子娶娘家兄弟的次女为妻，顾老太爷觉得儿子性格顽劣，若是娶个只知道一味顺从丈夫的妻子只怕行事会更加无所顾忌，所以做主为儿子求娶了当时宣宁侯的长女费氏。
费氏未出阁前是京中有名的才女，不但精通诸子百家，且擅书画晓音律，十四岁那年就拜在名士朱羡门下，从此声名大噪。
照理说以费氏的才貌，顾亦棋是配不上她的。但当时宣宁侯府只是京中的三流世家，而顾老太爷已累官至吏部尚书，所以顾家向宣宁侯府提亲之后，老宣宁侯左右思 量之下觉得这门亲事挺好，就答应了。
顾亦棋学问虽不好，但却是个极懂风花雪月的人，也知道怜香惜玉，因此费氏嫁进来之后俩人也曾有过几年甜蜜的日子。只是随着时日渐久，费氏清高的性格渐渐为顾亦棋所不喜，而顾亦棋的不求上进也让费氏对他越来越失望，特别是在儿子顾成昱出生