杜子远是杜老爹抱回来的。
据当地老一辈的村民回忆，有一年，年轻的杜老爹说是收到一个远亲表哥的口信，邀请他参与修建一处建筑。杜老爹祖上是木匠，到了杜老爹这一辈，虽说手艺已经有点没落，但是造个家具打个小物件什么的，是不成问题。年轻的木匠嘛，对修建工程，和同行交流技艺这些，总是有向往的，于是杜老爹就去找他远亲表哥了。
大概过了四五年吧，杜老爹回到布阳村。手里头多了个婴儿，也就是杜子远。
村里的人围着杜老爹，问这孩子哪来的？杜老爹一边驱赶好事的村民，一边到处找哺乳期的妇人和产乳的牛羊。
后来有不死心的村民打听到，这孩子就是杜老爹那远亲表哥的儿子。因为身有腿疾，杜老爹就陪着夫妻俩一路南下寻访名医。奈何越往南方，瘴气就越横行，夫妻俩水土不服，折路上了。于是，杜老爹就带着这个命不该绝的孩子，居然也一路平安地回到了布阳村。
杜老爹一直没娶妻，把杜子远当成亲儿子，手把手地将他养育成人。小时候，教他洗衣做饭，喂鸡喂鸭。长大一点，就教他木匠活。
期间杜子远的腿疾一直没有起色，杜老爹不想亏待了他，在他十岁那年，就拿了重礼，舔着求了村里一位致仕回乡的老学者，请求他当杜子远的老师。
因为腿疾，杜子远小时候饱受别人的冷眼。
村子里的人爱嚼舌头，村民们会当着杜子远的面叫他“小瘸子”。小孩子有样学样，也叫他“小瘸子”。后来居然还编了串顺口溜，一大群小孩子专门跑到杜子远跟前唱给他听，唱完了还互相挤眉弄眼，嚷着“来追我呀！来追我呀！”，然后哈哈大笑着跑开。
气得杜子远从轮椅上摔下来，爬着捡起石头丢向他们。有个小孩子被砸破了头，闹到大人面前。杜老爹赔了药费，又恶狠狠地警告了那些小孩一番。
后来杜老爹在轮椅上挂了一个布袋，里面装满了小石头。又做了把小木剑，告诉杜子远，要自己学会保护自己。
等到杜子远跟着老学者读书学习，村里的人就酸了。
拜师学习可是一项大花费，每年不但要给老师束修，逢年过节，还要送礼。再加上学习要买纸墨笔砚，这些都很费钱。一般的农家子要读书，就要做好“一人读书，全家吃土”的思想准备。
村民们理解不了，杜子远一个瘸子，又不能考科举当秀才，有必要花钱读书吗？他们大都是泥腿子，自家的孩子，都没钱送去私塾，看不得杜子远这般糟蹋钱财。
归根到底，还是眼红。
杜老爹本身有木匠手艺，农闲时，给周边人家造家具也能挣些钱。
又有一把力气，平时进山打个鸟找点山货，或者下水捕鱼捉龟什么的，总能有所收获。
家里还有水田和山地。这些水田和山地，一部分是祖传，一部分是后来花钱买的。这边盛行种水稻，一年两熟。交了税后，留下来的足够两人吃，甚至还有剩余。至于山地，大部分种了木材，不用怎么打理。只留一部分用来种菜，也足够爷俩吃。
总之，在附近几个村子里，杜老爹的家底委实不错。
另外还有一个原因，就是这附近十里八乡，只有这么一位致仕回乡的老学者，大家都对其很是敬重。想不到德高望重的老学者，没有收其它学子，却收了杜子远这个学生。
村民们真真是羡慕妒忌恨。想不通杜老爹为什么还不成家？为什么这么看重一个瘸子？大家伙都觉得很不可理喻。
于是就有人私下就生出了别的念头。
杜老爹的一个表哥找上门，说你一个人这么多年来，一把屎一把尿地把杜子远扯大，确实不容易。现在杜子远能照料自己，你也该考虑一下终身大事了。我媳妇那嫁布雨村的妹妹，刚死了相公，但她人长得福气，又没生小孩，你可以央媒婆过去求娶回来，好生个大胖小子传宗接代。
苦口婆心地说了一大堆“不孝有三，无后为大”的话，临走时还说道：“杜子远没上族谱，我们都不认他是杜家人。”
杜老爹枯坐着想了一夜。
第二天，就顶着黑眼圈，提了重礼，去拜访杜家族长。杜老爹向族长提出认杜子远为义子，要求开祠堂，入族谱。
老族长也听说了一些闲言闲语，想得更深远一些，不由问杜老爹：“过继也不考虑吗？”
杜老爹神情坚定，不再犹豫，说：“就杜子远吧，其它的无须考虑！”
就这样，杜子远入了族谱，成为了杜老爹的义子。村民们见识了杜老爹的决心，倒也佩服。那表哥见事不可为，想着日后可能还要靠着杜老爹帮衬，就歇了做月老的心。
随着杜子远慢慢长大，村子里的议论又多了起来，原因是他长得俊！不是小白脸的那种，而是刚毅又不失儒雅的俊。他从小干活，肩宽臂长。又因为念过书，身上有一种温文尔雅的气质。
所以在他十五岁的时候，有媒婆上门说亲。媒婆说的是布雨村一个小寡妇。那小寡妇娘家有四个弟弟，小的那个还嗷嗷待哺。若娶了过来，很有可能就成了扶弟魔。
媒婆是这么跟杜老爹说的：“杜子远长得俊有什么用，又不能犁地耙田。娶了那小寡妇多好，平时帮衬一下几个弟弟，等他们长大了，肯定会感恩，不会嫌弃姐夫是个瘸子，会多多走动的。”
若杜子远是个连自己都照顾不了的废物，杜老爹或许还会考虑一下。但他不是啊，那就没必要当个滥好人。于是当场就拒绝了媒婆。
媒婆赚不到那份喜钱，有点不甘心。于是又笑咪咪地说：“看不对眼没关系，还有另一个寡妇，娘家已经没人，包保会一心一意跟着杜子远......”
还没说完，就被杜老爹推了出去，“啪”地一声在她面前关了门。
媒婆差点被夹到鼻子，顿时黑了脸，叉着腰骂道：“好你个杜老头，媒人钱都给不起，还好意思嫌弃人家寡妇！你儿子是个瘸子，说不定还是个太监，还敢挑三拣四，小心你断子绝孙！”
这话够歹毒的，杜老爹气得打开门，一盆洗脚水泼了出去。
媒婆被泼了个正着，一脸不可置信。
接着“哗啦啦”的，屋里飞十几个铜钱。
媒婆手指发抖地捡起钱，踉踉跄跄地走了。
后来，媒婆再也没上过杜老爹家，不过附近的几个村子都开始传起了杜子远的流言。
“听说了吗？布阳村那个瘸腿的杜子远，是个不能人道的。”
“哎哟！长得怪俊的，太可惜了！”
“俊有什么用？又不能当饭吃。要我说，他就是个扫把星！杜老爹为了他都不娶妻，现在真的是要断子绝孙喽！”
......
村民们怀着那不可告人的阴暗心思，心照不宣地，齐齐排斥起杜子远，编排着他的坏话。
自此，才貌双全的杜子远，成了村民口中的“废物”、“瘸子太监”、“扫把星”。