晏仲，是陕西延安人，他跟哥哥晏伯生活在一起，兄弟二人非常友爱。晏伯三十岁时就死了，没有子嗣；不久，他妻子又相继去世。晏仲十分悲痛，常常想自己如能生两个儿子，就把一个过继给去世的兄嫂作为子嗣。但刚生下一个儿子，自己的妻子也死了。晏仲担心续弦后，新妻子会虐待儿子，便不想再娶，只想买一个妾。正好邻村有卖奴婢的，晏仲去相看了相看，一点也不中意，很感沮丧无聊。又碰上一个朋友请他喝酒，喝完后，便醉醺醺地往回赶来。
路上，晏仲忽然碰到已经死去的同学梁生，见了晏仲热情地握手问好，请晏仲到自己家里坐坐。晏仲醉得稀里糊涂，也忘记他已经死了，跟着他走了。进入家门，一看不像是梁生原来的家，心中疑惑，便问他，回答说：“最近才搬来。”到屋里坐下，要喝酒时，一看酒却没了。梁生嘱咐晏仲稍等等，自己拿着酒瓶出去买酒去了。
晏仲站在门口等着粱生，见一个妇人骑着匹毛驴经过，后面还跟着个小孩，大约八九岁的样子，相貌神态极像哥哥晏伯。晏仲怦然心动，急忙赶上，问那小孩姓什么。小孩回答说：“姓晏。”晏仲更加惊疑，又问：“你父亲叫什么名字？”回答说：“不知。”正说着话，已经到了小孩的家门口，妇人下驴走了进去。晏仲拉住小孩，问：“你父亲在家吗？”小孩点点头，也走了进去。一会儿，又有个妇女出来看了看果然是晏仲的嫂嫂。见了晏仲，惊讶地问他是怎么来的。晏仲大为悲伤，跟着嫂子进入家门，见房屋院落，整洁一新，便问：“哥哥在哪埋？”嫂子回答说：“出去讨债还没回来。”晏仲又问：“那骑驴进来的是谁？”嫂子回答说：“是你哥哥的妾甘氏。她已经生了两个男孩了。大的叫阿大，到市上去还没回来。你看见的那个是阿小。”
晏仲坐了很久，酒渐渐醒了过来，心里一下子明白了自己看见的这些人全是鬼。但因为跟哥哥感情深厚，所以也不害怕。这时，嫂子开始热酒做饭，晏仲急于见到哥哥，催促阿小去寻找。过了很久，阿小哭着回来，说：“李家赖债不还，还和父亲打架！”晏仲听说，急忙跟阿小奔跑了去，见两个人正把哥哥摔到地上。晏仲大怒，挥舞着拳头，径直冲了过去，一连打翻了几个人，将哥哥救了起来。李家的人四处逃散，晏仲追上一个，按到地上痛打一顿，解恨后才起来。拉着哥哥的手，跺着脚伤心地哭泣，晏伯也哭了。
回来后，全家人都来慰问。晏伯于是备下酒菜，兄弟二人举杯相庆。不一会儿，一个少年走了进来，约十六七岁的年纪，晏伯叫他阿大，让他拜见叔叔。晏仲忙将阿大拉起来，哭着跟哥哥说：“大哥在地下已有了两个儿子，但大哥阳间的坟墓却无人祭扫。我孩子小，妻子又死了，这可怎么办好呢？”晏伯也辛酸悲伤起来。嫂子在一边跟晏怕说：“要不的话，就让阿小跟他叔叔去吧！”阿小听了，依偎在叔叔的怀里，恋恋着不想离开。晏仲抚摸着他，越发感到难过，问阿小：“愿意跟我走吗？”阿小忙答：“愿意。”晏仲心想：阿小虽然是鬼不是活人，但有总比没有好，心里便高兴起来。晏伯嘱咐弟弟说：“让他去，不要太娇惯了他。要让他多吃血肉，每天在太阳底下暴晒，一直到过午。他才六七岁，此后历尽寒暑，再生骨肉，仍可娶妻生子，只是恐怕寿命不会长了。”正说着话，门外有个少女在偷听，模样很是温柔文静。晏仲以为是哥哥的女儿，便询问晏伯。晏伯说：“她叫湘裙。是我的妾甘氏的妹妹。因为父母双亡，孤独无靠，寄养在我这里也有十年了。”晏仲又问：“嫁人了吗？”“还没有。最近有媒人给介绍东村田家的孩子。”少女在窗外小声嘟囔：“我不嫁田家那放牛郎！”晏仲对她不觉心动，但不便直说。接着，晏伯离座，在书房中摆下床榻，让弟弟住宿。晏仲本不想住下，但心中惦念着湘裙，正想设法摸摸哥哥的意思，于是，便告辞哥哥去睡了。
当时，正是初春，气候还很寒冷。书房中没有炉火，像在冰窖里一样。晏仲不觉毛骨悚然，浑身起了层鸡皮疙瘩。突然想喝点酒。一会儿，阿小推门进来，把一碗肉羹、一斗酒放到桌子上。晏仲大喜，问阿小谁让他来的，阿小回答说：“是湘姨。”酒刚喝完，阿小又端了盆炭火来，用灰盖着，放到床下。晏仲问：“你爹娘都睡了吗？”阿小说：“已睡下很久了。”“你睡在什么地方？”“我跟湘姨一块睡。”阿小直等到叔叔睡下，才闭上门走了。晏仲觉得湘裙既聪明，又会体贴人，心里更加爱慕。又因为她能抚养阿小、越发坚定了娶她的念头。辗转床头，一夜没睡。
第二天早早起来，晏仲告诉哥哥说：“我孤单一人，没有配偶，麻烦大哥多多费心。”晏伯说：“我们家不是穷家，自然会有人替你物色。阴间虽然有漂亮女子，恐怕对你没有好处。”晏仲说：“古人也有娶鬼妻的，有什么害处呢？”晏伯像是明白了他的意思，便说：“湘裙倒是不错。但须拿大针刺‘人迎’穴后血流不止的鬼，才能做活人的妻子。这事怎能草率呢？”晏仲说：“娶了湘裙也能照顾阿小。”晏伯只是摇头。晏仲哀恳不已。嫂子说：“不妨捉住湘裙，强刺一针检验一下，不行的话就算了。”于是握着针出去，到门外正碰上湘裙，急忙攥住她的手腕，只见她手上有血迹，还是湿的！原来，湘裙在门外愉听到晏伯的话，已经自己试过了。嫂子放开她的手，笑着回去告诉晏伯说：“她早就对小叔有意了，你还为她忧虑什么？”妾甘氏听说后大怒，奔到湘裙跟前，用手指戳着眼骂道：“淫婢好不害臊！想跟着小叔私奔吗？我偏不让你如愿！”湘裙又羞又气，号哭着要寻死，闹得一家人沸反盈天。晏仲十分惭愧，告辞兄嫂，带着阿小出门走了。哥哥说：“你暂且回去吧。不要让阿小再来，以免减损他的阳气。”晏冲答应了。
回家后，晏仲故意夸大了阿小的年龄，跟人假说是哥哥先前所卖奴婢生的遗腹子。众人因为阿小相貌极像晏伯，也就相信了他是晏伯的儿子。
晏仲教阿小读书时，总是让他抱着本书坐在日头底下朗读，阿小起初还觉得苦，时间长了也就习惯了。六月酷暑天气，桌子被烤得烫人，但阿小边玩耍边读书，一点也不抱怨。又最聪慧，每天读半卷书。夜晚就和叔极一块睡，还常常把学会的文章背给叔叔听。晏仲很感欣慰。但心中一直念念不忘湘裙，所以也不想再娶别的女人了。
一天，有两个媒人来为阿小提亲。因为没个女人操持招待，晏仲十分焦躁。忽然甘氏从外面走了进来，对晏仲说：“小叔别怪，我把湘裙送来了！前次因为她太不害羞，要自己跟人，我所以故意羞辱她一番。其实小叔一表人才，不让她跟你跟谁呢？”晏仲见湘裙果然站在甘氏身后，非常高兴。恭敬地请嫂子坐下，说还有客人在堂屋里，自已便出去了。一会儿又回来，见甘氏已走了。湘裙卸妆进了厨房，只听叮叮当当一片刀板声传来，瞬间，美味的菜肴便纷纷摆了上来。客人走后，晏仲进屋，见湘裙盛装端坐着，于是和她交拜成了亲。到晚上，湘裙仍想跟阿小一块睡，晏仲说：“我要用自已的阳气温暖他，他不能离开我。”让湘裙到别的屋子住下了，只是每晚过去和她喝几杯酒、欢会一次罢了。湘裙待晏仲前妻生的儿子犹如亲生一般，晏仲更加喜欢她，觉得她非常贤惠。
一晚，夫妻二人谈得非常融洽欢乐。晏仲开玩笑般地问湘裙：“阴间里也有美人吗？”湘裙想了很久，回答说：“我没见过。只有邻居家的女儿葳灵仙，大家都说漂亮。其实她相貌平常，不过会打扮罢了，和我来往最久了，但我心中一直鄙视她太浪荡风骚。你如想见她，我可以马上叫她来。只是这种人招惹不起！”晏仲听说，立刻就要见见她。湘裙提起笔来像要写信，却又扔下笔说：“不行不行！”晏仲再三恳求，湘裙才说：“你可不要被她迷住了！”晏仲答应。湘裙便在纸上画了几笔，像是一道符咒，拿到门外烧了。一会儿，便听见门帘微动、帘钩作响，有吃吃的女子笑声传来。湘裙起身，出去将一个女子拉进来。只见她高高的发髻，前面翘起，真像画上的美人一样。湘裙拉她到床头坐下，二人喝着酒诉说离情。那女子初见晏仲时，还害羞得用红袖子捂着嘴，不怎么说话。几杯酒下肚，便露了本相，跟晏仲嬉笑打闹，毫无顾忌，渐渐伸过一只脚去压到晏仲的衣服上。晏仲心迷神摇，魂都不知飞到哪里去了。只是眼前碍着湘裙在座，湘裙也防范着葳灵仙，在旁边一刻也不离开。一会儿，葳灵仙忽然起身拉开门帘走了出去，湘裙忙跟着，晏仲也随后出屋。葳灵仙竟拉着晏仲的手，二人跑进了别的屋子。湘裙十分愤恨，但又无可奈何，只得愤愤地回屋，听任他们为所欲为了。不长时间，晏仲回来了，湘裙责备他说：“不听我的话，恐怕你日后赶也赶不走她！”晏仲怀疑湘裙是在嫉妒葳灵仙，二人不欢而散。
第二晚，葳灵仙不叫自来。湘裙极为厌烦，也不答理她。葳灵仙竟又和晏仲手拉着手走了。这样一连过了好几晚，湘裙再也忍耐不住，看见葳灵仙来，就百般斥骂，却苦于赶不走她。又过了一个多月，晏仲便一病不起，才开始后悔，叫来湘裙一块睡，想以此躲避葳灵仙的纠缠。湘裙也日夜防范，但稍一疏忽，晏仲又被葳灵仙勾去了！湘裙怒不可遏，操起擀面杖，往外赶葳灵仙，葳灵仙也愤怒地和她争执，二人打了起来。湘裙体弱，手脚都被葳灵仙打伤。晏仲见此情景，病势更加沉重。湘裙哭着说：“我怎么去见我姐姐啊？”又过了几天，晏仲便死了。
先是晏仲见两个皂隶手持文牒走了进来，自己不知不觉地跟他们走了。途中担心没有路费，便邀请皂隶顺便到哥哥住的地方去坐坐。到了晏伯家，哥哥一看见他，惊骇失色，问他：“弟弟最近干了些什么？”晏仲回答说：“没什么，只是得了鬼病。”于是告诉了哥哥实情。晏伯听了说道：“这就是了！”拿出一包银子，递给两个皂隶说：“请你们收下吧！我弟弟罪不至死，请你们放了他，我让我儿子跟你们去，不会出什么事的！”便叫过阿大来陪着皂隶喝酒。自已返身进屋，将情形告诉家里人，立命甘氏去隔壁叫葳灵仙来。不一会儿，葳灵仙进来，看见晏仲，返身就逃。晏伯一把揪住，拽回来骂道：“好个骚奴婢！活着时是荡妇，死了还是贱鬼，早就不齿于人了，还敢来害我弟弟！”摔手就是几耳光，打得她头发四散，容貌减色。过了很久，一个老婆婆走进来，跪在地上哀恳晏伯饶了葳灵仙。晏伯斥责老婆婆纵女淫荡，又痛骂了一会儿，才让她领着女儿走了。
晏伯送晏仲回来，飘飘忽忽的，不觉到了自家门外，径直走进卧室。晏仲一下子醒了过来，才知道自己刚才已经死了。晏伯见了，湘裙，责怪她说：“我和你姐姐以为你贤慧能干，所以让你跟了我弟弟。没想到你反而促他早死！若不是碍于名分，我非重打一顿不可！”湘裙又惭愧，又惧怕，低声哭泣着，跪在晏伯面前谢罪。晏伯看见阿小，喜欢地说：“我儿子竟然像活人了！”湘裙要出去做饭，晏伯推辞说：“弟弟的事还没办妥，我没功夫吃饭。”阿小这时已经十三岁了，渐渐留恋父亲，见父亲要走，流着泪跟着。父亲安慰他说：“跟着叔叔最快乐。我走后还会再来的。”说完，一转身便无影无踪了。从此后，再没通过音讯。
后来，阿小娶了媳妇，生了一个儿子。阿小也是到三十岁时死了。晏仲抚养着他的独子，就跟侄子活着时一样。晏仲八十岁时，阿小的儿子已经二十多了，便让他分家另过。湘裙则始终没有生育。
一天，湘裙对晏仲说：“我先到地下准备好居住的地方。”说完，便盛装上床去世了。晏仲也不悲伤，半年后也死了。