再说沐剑声等人一路南下，其后基本没有遇见风险。那赵三千也与沐剑声等人同行。有了众人看护，他的伤势也逐渐好转，此后就提出要离开，可是当沐剑声‘无意’间告诉他莫雨亭爷孙等人眼下就在自家大本营时，那赵三千很是意动，立刻改变主意，提出要一路前往，沐剑声的阴谋得逞，笑着答应下来。
在路上，赵三千将自己的真实身份来历，和这些年的大致经历，向大家简单说了一下：他本是衡山派的一名长老，心性闲散，醉心武学，与世无争，而且儿孙齐全，日子也过得和和美美。可惜的是，在明末这个乱世之秋，想要真正脱身事外，求得平安，实在是极为难得。由于当时的掌门人意图复兴宗门，不料因为眼界不够，反而站错队伍，得罪了朝廷，于是引得嵩山泰山等派就合力强攻衡山。此后回雁峰上一场大战，掌门刘玄之和三大长老奋力御敌，掩护多数弟子逃散，最终另外三人当场战死，而赵三千也不得不参与其中，最后因为伤重力竭，被打下了悬崖。
敌人都以为他必死，谁知道他中途竟然压断几个树枝，减缓了下坠速度，掉到了一条河里，奇迹般生还。此后十几年里，由于山门已破，宗派瓦解，他几乎万念俱灰，如此浑浑噩噩的过了很长时间，直到几年前，他意外遇见了几名本门的幸存者，在他们的鼓动下，才兴起了些许复兴本门的心思。
要复兴宗派，首先就要聚拢弟子，可这些年为了找寻同门，他以乞丐流民的身份，走访了不少地方，也着实找到了不少逃出来的同门，可是时过境迁，这些人已经重新安家，加上指定的继任掌门一直没有露面，生死未卜，没有了领头人后，他一个过气的长老，而且也没有宗门的关键信物，就很难把这些人再度捏合起来。
衡山派传承宗门的信物共有三件，却很少为外人所知，第一件是‘火云剑’，是衡山创派祖师火云子的佩剑，乃是他采集域外陨铁，结合祝融峰上的精钢冶炼而成，锋锐无匹；第二件是‘千幻图’，是一面图册，作用就是用来参悟衡山派‘百变千幻快剑’的关键图册，意义非凡；第三件就是‘南岳令牌’，亦即掌门令符。当时危机之时，这三样东西被可靠之人分开携带，逃下山去，即使赵三千多方寻找，至今依旧毫无线索，如果能够找到一样东西，就有了号令之物。