“那傻子怎么老跟著楊川，好像他家的一條狗。”
甚至有好事者說起了葷話：“他該不會是想扒楊川老婆吧？”
可是天地良心，楊文樹從來沒有對楊小娘有過非分之想，他只是喜歡和她在一起，和她說說話，看她笑，看她開開心心的。
這樣他便心滿意足了。
但是好景不長，楊川意外身亡，楊小娘變成了寡婦。
看到楊小娘為丈夫的死哭得死去活來，萬念俱灰，楊文樹也心如刀絞。
楊小娘常常到丈夫落水的水泊旁，為亡夫悼念。
楊文樹生怕她做傻事，總是默默地跟在她的身后。
村里有些不老實的閑漢打起了楊小娘的主意，常常半夜三更在她家門外徘徊。
楊文樹就拿石頭砸他們，不過有時候他也會被閑漢抓到，打得鼻青臉腫。
“你這個傻子，就他娘的一條瘋狗！”
但不管怎樣，他就這樣一次又一次默默地保護了楊小娘。
直到有一天，村里發生了一件大事。
那天全村的村民都回來了，船舶停滿了船塢，每個人臉上都帶著喜慶。
楊文樹想了半天，也想不出那天有什么節日。
不過他很快便得知了，長老會決定，要吃絕戶，把楊小娘的財產收繳一大半到長老會，為了避免遭人口舌，拿出一小半宴請全村。
楊文樹發瘋了，他大喊大叫，竭力阻止眾人，可是換來了只有暴打。
他被鎖進文廟，關了整整一天。
等到他出來的時候，宴席已經結束，村民都散去了。
他急速奔到了楊小娘的家里，卻看到楊三叔衣衫凌亂地從里邊走出來。
那一夜，楊小娘頭發凌亂，身上滿是淤青，目光絕望，呆呆地坐在水井旁，沉默了一夜。
楊文樹怕她有什么意外，一直靜靜地陪著她身邊。
“文樹，人如果死了，是不是一切痛苦就可以結束了？”
“我真傻，你又怎么知道呢。”
“文樹，我房里還有一些月餅，你若是餓了，可以拿去吃……”
楊文樹陪了楊小娘一夜，中間實在太困，打了個瞌睡。
等他醒來的時候，看到楊小娘已經自縊在了房梁之上。
他痛苦地撲到了楊小娘的身旁，呼喚道：“姐姐，你不要死，不要死……”
可是楊小娘早已經氣絕了。
從那天起，他決定為楊小娘復仇，他要那些害死楊小娘的人得到報應。
但是他就是個侏儒，以自己的能力，要殺死那么多人實在太難了。
直到有一回，他遇見了水鬼六郎，六郎說可以幫他一起復仇。