向荣也没有跟着彭玉麟的船队走，而是自己沿另一条途径撤退了。
他把自己属下普通的兵将都交给了彭玉麟，让他带着从溪江水路撤退，虽然他一个普通兵将都没有留，但也不是自己单独一人。
保护他的是他的铁卫，为首的是向家五兄弟，都是他侄子辈的，性格暴躁，武艺高强，号称向家五凶，分别是向虎、向豹、向熊、向罴、向狼。
这五人由于不能遵守军纪，所以并没有在绿营兵册上挂号；但是为督军配置的三百亲兵却归他们带领。
这些亲兵当中什么人才都有，有几个人是老探稍出身，对这一带地形非常熟悉，知道一些罕为人知的小径，可以抄近路尽快返回总督驻地。
这也是为什么他们明知道巡抚劳崇光也单独行动，而且目的地一致，也没有和他们同行的原因。一个是人多容易暴露目标，另外还担心他们成为拖累。他这三百亲兵可都是精挑细选的军种精锐。
他们除了桂港，直接往北，到了贵平，然后转入了位于紫荆山区的通衢大道。这里本来是一条商路，经常有大批过山客从这里经过，把山里的出产运到下面的口岸等地出售，让后再把生活用品运回来。
所谓过山客，就是背着货物和土产翻山越岭的行脚商，这在当时是一种主要的运输方式。这些人为了掩人耳目，也假扮成过山客。这个季节，正是山货收获的日期，所以出现过山客是毫不奇怪的事情。
这些人能把情况了解到这种程度也算不错了，可惜的是，他们不知道这个地区发生了一些重大变化。以至于他们的巧妙安排很快就被人看出了反常。
一个重大就是这里原来的过山客主力就是那些烧炭人，这里出产的上等质量的焦炭就是过山客运输的一项主要商品。这些人前不久全部被迁移进了圣山基地，所以既没有了主要的人力，也没有了主要的商品，结果这些股山客基本上绝迹了。
这些向家卫队三百多人装扮成过山客，在往常已经是引人注意。何况是现在？
第二个因素。就更是外人不得而知的了。虽然这里的人走了，但是原来的村落已经被圣山规划为冶炼厂地址，所以被圣山的防守体系纳入了整体防护之中。
而防守体系的一个环节就是圣山老鼠巡山队，他们不但对这些地段非常熟悉。对过往的行人也可以通过嗅觉辨别是生人。还是熟客。
可巧不巧的是。今天负责在这个路段巡山的前不久参与袭击满清清剿大军的山鼠，它已经被提拔为老鼠特战队的排长。
也许别的本事不行，但是它们的嗅觉灵敏无比。而且记忆力超强。这别倒霉的清兵已进入通衢大道，立即就被这些老鼠发觉了：“原来这些家伙是从那里逃跑的漏网之鱼！既然来到这里，就别走了！”
接着马上履行自己的责任，报有敌人来的情报发了出去。
这情报一触发，整个情报的传递、整理、分析、采取行动一气呵成，五分钟以后，第一批应对力量已经派出，并且已经到达了原来的烧炭人居住地附近。