之后，夫妻俩在儿子的教育问题上有了明显的分歧。
费氏觉得儿子作为顾家的长子嫡孙，应该把精力放在读书上，将来才能金榜题名，光耀门楣。而顾亦棋对读书做学问不感兴趣，觉得儿子完全不必辛辛苦苦的考取功名，将来靠父亲的荫恩照样能入朝为官，支应门庭。
有了这根导火索，夫妻之间的矛盾愈演愈烈，再加上顾老太爷一向喜欢费氏这个聪慧懂事的儿媳妇，每次小俩口闹矛盾的时候，他总是站在费氏这边，劈头盖脸地对着顾亦棋就是一通训斥，终于，在顾成昱成功通过童子试之后，费氏与顾亦棋彻底变得水火不容，相看两厌。
顾亦棋行事越来越乖戾无常，对待费氏全然没有了嫡妻的尊重，甚至纵容妾室羞辱妻子，以至于外人都说他宠妾灭妻。顾老太爷几番训斥，他仍屡教不改，惹得族中旁支都在暗地里看费氏的笑话。
费氏心灰意冷，搬到了城外的别院居住，对外只称是病重，在别院休养。
顾老太爷眼看着儿子是彻底指望不上了，就把希望都寄托在孙子身上，把顾成昱接到身边亲自教养。
再说顾家的旁支，论起血缘亲疏，顾四老爷顾亦钟所在的房头与顾老太爷这房是最亲近的。顾亦钟的祖父是顾老太爷的