不久之后，石如殷远在外地做县令的长子也找了来。圣人旨意下绝无漏网之鱼，长子官职被革也带着家人回了乡。
本以为长子的到来会带一些财物，没想到大儿媳是个厉害人。她本就是武官家的女儿，比寻常女子都剽悍些。
此次石如殷一支被一撸到底，她倒是有些放不下石大郎，与娘家派来接她的兄弟一合计，直接摆明车马要石大郎入赘她梁家。
石如殷自是不肯，自己好好的儿子怎可做上门女婿，当场就拒了大儿媳的提议。
结果大儿媳完全不是征求他的意见，只是来告知他结果，顺便也是应旨送石大郎返乡。
第二日就让娘家兄弟将石大郎绑上马车绝尘而去，石夫人为此哭得眼睛都差点瞎了。
大儿媳绑走长子时还算念了点往日情分，留下了一些财物，或者也可以说买走石大郎的卖身钱。
如果靠着这些钱财，石如殷与石如蔚能老实找点事做甚至是做个买卖，他们也能在新丰城里彻底安置下来。
但是做惯了大官，石家两兄弟根本不屑去做什么工，石六郎依然躺在床上养病，石五郎原本是个纨绔本就文不成武不就，女眷们更是十指不沾阳春水。
一家人不事生产，很快就坐吃山空。最后石如殷不得已将几名爱妾卖了，小院子也卖了，去官府赁了几亩荒地和山地，在新丰边境一个小村子落脚下来。
但石家人如何会种地，石如殷石如蔚成日坐在院子里发呆，石夫人等女眷不屑与村里人来往成日的关在屋子里。
终于病愈的石六郎得知父亲官职被撸、自己功名被革，自家还三代不得科举完全断绝了他再向上走光复门楣的路，人变得有些疯疯癫癫更是不干活。
一家人生活的重担只能压在了石五郎、吕若薇和石如蔚爱妾柳姬的身上。石五郎平日在村里的田地里种植麦子，吕若薇与柳姬上山种些土豆贴补，日子勉强过了下来。
石如蔚因为与妻子和离，在石如殷变卖妾室时留下了柳姬。可柳姬哪过过这种贫苦的日子，在与吕若薇种了几天土豆后，在一个月黑风高的夜晚逃了。
因为家里实在太穷，柳姬连款都没有卷到，粮食也被石老夫人严密的看管，她只带了一身粗布衣裳就消失在了村子里。
石如蔚经过此事更是性情大变，连酒都酗不起的他只能跟石六郎一般，成日关在屋子里，因为吃不饱只能大睡度日。
少了柳姬，家里干活的人只剩下吕若薇与石五郎。石五郎是石如殷的妾室所出，那妾室生下他后不久就去世了，石五郎便一直养在石夫人膝下。
与早早考上功名的大哥与摘得探花功名的六弟不同，石五郎是洛阳里随处可见的高门纨绔子。