叶衡被罢工去宰相职位之后，回到家里。
有一天，他害了病，不少人都来看望他。他问大伙儿道：“我快死了，但不知死后好不好过？”
有个读书人回答说：“很好过！很好过！”
叶衡惊问道：“你怎么知道呢？”
“不好过死去的人便都逃回来了。至今，还没见到有哪个死去的人逃回来，可见死了以后很好过呀！”
满座的宾客听了都禁不住地大笑起来。