卫老爷被救回来以后，开始他并没认出戴面具的是他大儿子，只是很惊讶老三竟然会跑来救他，卫知游小心的照顾着父亲，养好伤以后，卫老爷才后知后觉的发现戴面具的人是卫瑞泽，疑惑的问道：老大，你搞什么！戴这么个鬼东西做什么？
卫瑞泽知道瞒不了父亲，只能跟爹说了实话，父子俩谈了很久，卫老爷才知道自己的儿子已经是江湖中人了，他不但没有生气，反倒很开心：这下好了，以后做生意有金鹤门罩着我，我再也不用怕了，好事呀！兄弟俩目瞪口呆的看着开心的父亲，他们没想到父亲不但没怪老大跟江湖中人来往，有辱门风，反而很开心，看样子，卫老爷活的明白，知道所谓的门风、面子等都是虚无缥缈的东西，只有活的舒心，全家衣食不愁才重要。
卫老爷养好伤以后，就要带着两个儿子回去，这段时间的相处，卫老爷人老成精，早就看出姓查的姑娘对老三有意思，卫瑞泽也看出来了，其实，在水里的时候，他就察觉到查姑娘对三弟有意了，可是，查姑娘的家世不明，他也不敢贸然决定什么。
眼看着心上人要走，查姑娘居然跟卫知游说：我要去都城办点事，跟你同路。
查姑娘竟真跟他们一起走了，一路往北走，路上，卫知游一直沉默不语，但是，当查姑娘一喊他，立刻答应。卫老爷忍不住想笑。
十天后回到家，庞氏一脸的憔悴，整个卫家一片萧条，竟然连下人都没几个，奇怪，他们离开才大半年左右，这是怎么了？
原来，他们走后，庞氏就独揽大权，先是大张旗鼓的给儿子娶了个媳妇，谁知，洞房之夜，卫仲钧掀开盖头，却一脸的嫌弃，他觉得这女人不漂亮，而且太老实本分了，一点都不解风情。
因而，转头就去了樱红的院子，然而，在樱红那腻歪了几天以后，他跟朋友去喝酒，听说回梦楼新来了一个花魁，就去看热闹，一下就迷上了那个美如天仙的女人，回到家茶不思饭不想的。可是，这花魁的赎身价要八万克银子，卫家全部的家产也不值这么多。
卫仲钧想到自己看上的两个女人都没能得到，心里窝火，就去借酒浇愁，喝了点酒，被那些酒肉朋友一怂恿，就下了赌场。赌的非常大，一个晚上就输掉了几百克银子，庞氏查账的时候发现不对劲，连忙问儿子，谁知，卫仲钧根本不理她，庞氏想拦都拦不住，如此三个月后，卫仲钧先后输掉了银楼、绸缎铺子、菜市场。而他娶的新媳妇，因为受不了丈夫的冷漠无视，加上进门三个月丈夫对她碰都不碰一下，干脆收拾东西回了娘家，之后，请了两家族长做证，写了合离书，这场婚姻就此结束了。
和离之后，卫仲钧不思悔改，对庞氏的劝告置若罔闻，继续赌钱，而且，越赌越大，半年之内，家里的铺子一间间的被输掉，后来连下人的月钱都发不出来了，下人一个个都走了（可芸早在三少爷离开的时候，就回家了，因为，三少爷走的时候吩咐：等我回来了就通知你回来，可芸走的时候，把紫光儿也抱走了。），再后来，樱红听说三少爷要把她卖掉，吓的收拾东西，连夜跑了。
兴一个家不容易，败一个家是真快呀！卫老爷查看着账本，还有那些赌场的借条，气的快疯了，他不止让庞氏跪在地上，亲自拿着家法狠狠打了她一顿，还让老大立刻带人把老三抓回来，绑回来。卫瑞泽打听到三弟常去的那家赌场，带人闯进去，只见卫仲钧眼睛通红的盯着赌桌上的色子，谁跟他说话都听不见。“给我绑了！”卫瑞泽一声令下，卫仲钧还没反应过来，就被按住了，他看见抓他的人竟是他大哥，顿时吓了一跳：大哥，你没死！卫瑞泽也不答话，上前一个手刀就把他砍晕了，然后抬走了。
回到家，用凉水把他泼醒，卫仲钧被绑着躺在地上，睁开眼看见爹脸色铁青的坐在那，他还以为自己见鬼了呢，一扭头看见娘也跪在那，顿时知道爹没死。完了，他完了。
卫仲钧被父亲一顿狠打，惨叫连连，庞氏跪在那心疼的一个劲求饶都没用，打完，卫老爷让人把这个败家子关进西院的一间厢房，卫老爷还让人把门窗都封死，把卫仲钧用链子锁住，只留一个小窗户往里送吃的，按时让人去打扫卫生。卫仲钧就这样被自己的爹关了起来，庞氏只能眼睁睁在旁边看着，哭个不停，庞氏本以为挨顿打这事就过去了，谁知，卫老爷一转手就给了她一封休书，让人把她撵了出去，什么都没让她拿，卫老爷气呼呼的说道：这个家都让你败光了，哪还有钱给你，你赶紧给我滚！我不要你这样的败家女人。庞氏傻了，随即反应过来跪在地上哭喊着不肯走，最后，到底被赶出去了，她在门口哭了半天，喊着卫老爷的名字，想让丈夫原谅自己。
卫老爷在书房打着算盘，查看账本，越看越生气，家里竟然落魄到这个地步了，卫家四代经商，辛苦几辈子才攒下这些家底，才大半年就只剩下两间铺子了，而且是生意很差的铺子，库房里积存的那些值钱的东西也都被卖的差不多了。
晚上吃晚饭的时候，桌上竟然四个菜都是素菜，只有一盘炒鸡蛋还是卫知游出去花钱买的鸡蛋做的。
卫知游回来以后去找可芸询问了一下，才知道他的花店和包子店没事，可芸时不时的到店里照看着，加上两家店铺的地契被卫知游藏的好好的。所以，庞氏没能打它的主意。唯一遗憾的是紫光儿，可芸一眼没看住，它竟和旁的狗勾搭上了，后来，跟着跑了就再也没回来。
卫老爷愁的一夜之间头发全白了，刚起床就听下人禀报：庞氏自杀了。她昨晚在门口哭喊了半天，也没人搭理，想到自己人到中年居然被休了。她娘家早没人了，一时间觉得无处容身，竟用头上的发簪狠狠穿过咽喉，死在大门口了。第二天，满身是血的庞氏被发现，下人吓坏了，赶紧通知了老爷。卫老爷念及到底夫妻一场，让人买了棺材，把自己一时气愤写的休书撕了。然后把庞氏妆殓起来，葬入卫家祖坟。
办完葬礼，卫老爷开始算计怎样重振家业，卫瑞泽让人把李氏和儿子接回来，他也忙着帮父亲，先是用金鹤门的路子帮父亲运送了几次货，收到运费以后，家里的情况总算缓解了一些，可是，要把输掉的铺子再买回来却是做不到的。