第二，当天大会是嵩山派举办的，出了什么差错都应该由嵩山派负责，嵩山派承认了自己的办事不周，但李旭一表面是说不介意，但也暗中和嵩山派撇开关系。

但这件大事可没让衡山派一蹶不振，反而衡山派的威名更是往日。

因为李旭一管理衡山派的方式和他师傅一致，而且做事比他师傅更加果断。在与自己师出同门的师弟师妹的辅佐下，衡山派被壮大起来。这五位师兄弟妹，有的保江湖一方太平，有的踏遍万里河山行侠仗义，除恶扬善，江湖中人因他们的善行而称他们为“衡山五子”。

在某天，“仙笔妙书”鹤白良先生亲眼见到衡山五子在衡阳做的善事，于是为他们五人作了一首诗：

衡阳望南岳，南岳居五子。

白布奏二胡，肃杀无耻徒。

遮面琵琶后，未听琵琶瑟。

略壮提三弦，挥之斩八荒。

埙响如万马，践踏不善类。

琴筝拨何曲，一瞬即天地。

五子一聚，定奏绝世曲。

如今这首诗，在江湖广为流传，衡山五子也成为了江湖上无人不晓的称号。