潘地主听说他不干了，起初还有些留恋，这人干活确实是把好手，身强体壮的又利落，看样子也算是个老实人。有心想留，但人各有志不能强勉，天要下雨，娘要嫁人，只好随他去了。
杜长工随即兴冲冲地跑到那块地里，挖开一看，哪里还有什么金子，分明就是一坛子水！万念俱焚的杜长工不素心，索性端起坛子把里面的水咕咚咕咚一气喝光。起投无路的他然后又回到地主家，要求继续做事。潘地主不知其中奥妙，还以为他是回心转意了呢，便高高兴兴地把他又留了下来。
到了夜里，杜长工猛觉肚腹不适，急寻茅厕时已是不及，随即满院子就地乱屙。清早听到有人扫院，杜长工心想坏事了，他昨夜的大便尚未及时处理呢！他急忙爬起身来从窗口往外一瞧，呀！满地都是金子，掌柜的手拣不及，正用扫帚往簸箕里扫呢！潘地主不知是太贪还是别的什么原因，或者是嫌儿女妻妾太多，或者是想独吞这些金子，或者是他祖先的遗传基因，他竟没有声张告诉任何人，而是私下里找了个地方把金子又埋起来了。
杜长工从此之后惦记在心，他瞄准了东家的这一大堆金子，时时打金子的主意。
智者千虑，必有一失，人算再高也算不过天，潘财主年纪轻轻的突然一夜突发急症，不治而亡，临死前一句话都未得及给后人交待。
杜长工在一个伸手不见五指的深夜里，心安理得地起出了那笔金子（这回没有变成水）。
三十年之后，杜家成了东家，潘家成了佣人。又过了三十年，杜家成了大户，潘家圩子成了空名。
谁能料到，最后最后，还是另一个姓潘的，竟不费吹灰之力、不花一钱一文便白白拿下了杜家大院，莫非这也是天意？
这一日小太监潘又安几个正在花园亭间饮茶喝酒，聊天说话，突有门倌前来报告说：
“门前有一打扮褴褛的倭国年轻女子，一到门口便污言秽语、大骂不止，说是专要找一个什么波斯女人、一个叫黄毛母猴的出去应战！”