許衡領著他的學生奔波于戰亂之途。經一梨園，學生迫于饑渴紛紛摘果。許衡端坐園側巋然不動。

學生說：園為無主之園，梨為無主之梨。

許衡答：梨園無主，我心有主。

之后，許衡入仕。

之后，見官場污濁，時時扼腕嘆息。

友人勸：時下世心無主。

許衡答：世心無主，我心有主。

遂辭官。辭呈說：

以權治國，不過當世；以利治國，不及三代；以德治國，長治久安。

許衡曾留下一方驚堂木，堅硬沉實，擊案錚錚有余音。這方警世之木，乃梨木雕成。

許衡歿，后人在墓側植一梨園。梨園碩果壓枝而無人私取。