子亡，子不得不亡。就算我要打死他，你一个外人也不能管！”
赵老爷气急，索性就去官府告状，知州胡大人判了冯老爷不曾违反律法，但是，他也说了，“即便是有‘父要子亡，子不得不亡’的说法，做父亲的，也不该太随意妄为。圣人曰，‘不教而杀谓之虐’，冯敬尧教子无方在先，打杀儿子在后。实在算不得慈父。”
冯老爷虽然被无罪释放，可是从此坏了名声，都知道冯老爷不慈。很多人觉得，虎毒不食子，冯老爷不好好教导孩子，还能把原配妻子留下的嫡长子活活打死，也不是个好的。
还有人觉得，卫氏就看着冯老爷屡屡打骂原配嫡子，又把重伤的孩子挪到乡下去，任其自生自灭，只怕也是个毒妇。
过了些年，冯老爷的两个庶子长大，要说亲时，卫氏都给找了小门小户的姑娘。冯老爷不高兴，卫氏就哭诉，“老爷，自从大公子死了，这些年，好些人家都误会老爷为父不慈，不敢把姑娘嫁过来。况且家业少了一半，咱家也比不上过去了，妾身也是没办法了。”
可是，等到卫氏自己的儿子说亲的时候，却定了举人家的女儿，冯老爷就觉出卫氏的私心。有一次，他看到卫氏母子在花园里说话，周围的下人都打发了，他就悄悄过去听壁角。