传说很久以前，山上住着一对老夫妇，二老五十多岁了，没有儿女，老婆婆六十岁那年生下一个男孩，取名梨驼。这孩子从小就非常聪明，而且长得英俊，人们都说他是星宿下凡，二老日后必有大福。
果然，梨驼十八岁时，智慧过人，又力大无比。消息传到京城，皇上听说后，派人传下圣旨，要将梨驼招为太子，帮他成就大业。梨驼虽不愿离开父母，但圣命难违，只好含泪而去。
梨驼走后，二老盼子心切，每天站在山上眺望。日子又日子，一年又一年，没有盼到儿子归来，比较后面死在山上。因此人们便将此山称为离子山。有趣的是，山顶的山岩，形似二人，一站一跪，传说这就是当年皇上降旨招梨驼的地方，人称太子岩。