在徽州府，有一位老爷姓徐，五十来岁的年纪，家里很有钱。他三十来岁娶妻生子，如今三个儿子，最小的儿子也快二十岁了。徐老爷平生只有一个爱好，就是喜爱研究风水。不过他只是业余爱好，并不精通。
父亲去世后，为了找到一块风水宝地，能够保佑自己全家平安、发财，徐老爷可没少费工夫。他把附近有名的风水先生都找来了，然后每天带着风水师四处看地方，为此他跑遍了周围上千个山头。
一天，徐老爷带着风水师们继续找地方，路过一个樵夫家。一位风水先生看了周围后，说：此地众山环抱，藏风聚气，真是个好地方啊！徐老爷不信，反问一句：既然是风水宝地，怎么这个人那么穷？风水先生说：因为这里只适合埋死人，不适合活人居住。
这时候，其他风水师也都纷纷点头，表示认可，徐老爷这下信了。
于是，徐老爷子派人去和樵夫商量，愿意高价购买，樵夫不愿意，说：我祖先一直住在这里，这是我的家啊，就是给我千金万金，我也不会卖。徐老爷又派能言善辩的人周二去说，结果一样被拒绝。
周二从樵夫屋里出来时，看到一位姑娘挑着柴禾从外面进来，模样不错，年纪不大，似乎才十六七岁。周二心动，忙问樵夫：这位姑娘，是您的掌上明珠吗？樵夫点头，说：老夫没有儿子，只有这一个女儿。周二又问是否愿意嫁人，樵夫拒绝，说女儿还小，现在不考虑嫁女儿。
出来后，周二对徐老爷说：我想到办法了。樵夫有个女儿，还没嫁人，跟您的小儿子差不多大。不如替您的小儿子聘了樵夫女儿，两家变一家，您就能得到这块风水宝地了。徐老爷不愿意，说对方只是个樵夫，身份太低了。周二劝他：您先让公子娶了他女儿，得了宝地，之后您要是不愿意，再让儿子休了樵夫女儿，不就行了吗？
徐老爷被说服了，于是派周二去当媒人。樵夫不愿意，觉得门不当户不对，他没想到对方是算计自己的住处。一次被拒绝，周二又去；一连提亲四次，樵夫觉得盛情难却，于是就答应了这门婚事。
一年后，双方就匆匆办了婚礼。婚后，徐老爷对樵夫说：我们家房子多，你我现在是一家人了，亲家您不必在那个地方受苦了，搬过来一起住吧。这样，您也可以天天看到女儿女婿，不是很好吗？樵夫很感动，和妻子都搬过来了。
樵夫搬过来后，徐老爷对他非常客气，相处也不错。没几天，徐老爷就说，希望能把父亲埋在樵夫住处。樵夫这次没有拒绝，反而客气地说：既然咱们是一家人了，我也搬过来了，那块破地方，亲家尽管用便是，我送给您了。
徐老爷大喜，于是择了吉日，拆了樵夫的房子，让风水师定了地方，然后开始往下挖。挖了三尺深，众人听到奇怪的声音，似乎是大石头，仔细一看是一块断碑，，上面刻了六个大字：居此绝，葬此吉。徐老爷拍手称赞那个风水师，果然住在这里不好，要埋在这里才好，老天爷都在碑上说清楚了。
父亲安葬几年后，徐老爷家更有钱了，他大儿子考中了功名，做了县令，二儿子也考中了功名但没有做官，学父亲一样做生意，干得很不错，挣了很多钱，就小儿子放荡不羁，但也没惹什么事。徐老爷子看到家里如此，非常满意，赏了风水师。
徐老爷的小儿子，一直很好色，经常出入青楼。娶了樵夫女儿没多久，又娶了一位娼妓，做了小妾。樵夫女儿说了他几句，他立马反目成仇，对其呵斥责骂。樵夫女儿受不过气，跟徐老爷说了。
徐老爷和妻子却说：你只是个樵夫的女儿，目光短浅，有什么资格批评丈夫呢？你丈夫是大户人家的孩子，即使天天在外面睡，经常与其他女子来往，娶三五个甚至十几个女子也都是常事，做大事的男人就是这样，哪能像那些种地的男人，一辈子只娶一个女人？
小妾听到后，更加肆无忌惮，经常欺负樵夫女儿，虽然她是正妻。后来小妾各种污蔑她，甚至偷了家里的钱后，诬陷说是樵夫的女儿偷家里的钱，勾引其他男人，总之就是各种泼脏水。樵夫女儿无法证明自己的清白，父母也帮不了她，她一怒之下，自缢身亡。樵夫妻子心疼女儿，每天以泪洗面，不久病死。
只剩下樵夫一个人了，徐老爷开始下逐客令，各种不给他好脸色，后来直接把樵夫赶走。
樵夫后悔无比，他一个人来到了当初的住处，这里已经是徐老爷父亲的墓地。他在这里徘徊许久，哭了很久，随后一头撞在墓碑上死了。
樵夫死后没多会儿，本来晴朗的天空忽然乌云滚滚，大雨瓢泼，天雷不断。雷声一直在徐老爷父亲墓那一片，突然一个炸雷，直接把徐老爷父亲的坟墓给劈开了，而且连棺材都炸开了。而旁边樵夫的尸体，慢慢不见了。
几天后，徐老爷来祭祀父亲，发现坟墓被雷击，不得已只好再买棺材，继续安葬父亲。为了避免再被雷击，这次他又让人往下多挖三尺深。众人挖着挖着，忽然挖到一块硬石头，仔细一看，又是一块断碑，上面写了七个大字：义则吉，不义则绝。
徐老爷仔细看了看，原来这块断碑和上次挖到的那块断碑，本来是一个石碑，不知道怎么断了，埋在了不同深度的土层里。
此时，徐老爷决定改葬。但刚改葬完，小儿子和小妾暴毙而亡，身上查不到任何伤，也没有中毒，不知道怎么回事，报案也查不到凶手。几天后，二儿子坐车去做生意，结果马受惊狂奔，二儿子从车上摔下来死了。长子在外地做官，因为贪赃枉法，被判死刑。
不到一年时间，徐老爷和妻子钱财耗尽，房子也卖了，两人最后在街头挨饿受冻而死。
至于徐老爷门下的周二，有一回他路过徐老爷父亲的旧坟（也就是樵夫当年的家），发现那里没了坟墓，而樵夫的房子还在那里，而且樵夫还请他进去。他进去一看，发现房子跟当年一样。当年这房子明明拆了，樵夫也早就死了，怎么现在又回到过去了吗？难不成遇到鬼了？
他受了惊吓，忽然醒来，原来是梦。但醒来后，他发现自己正睡在樵夫的房间里，这难道不是梦？
周二吓得狂奔回家，到了家里，累得口吐白沫。家人问他怎么回事，他忽然大叫一声“樵夫又来了”，随即吐血不断，没多会儿就死了。
