在寿春城内住了近十天时候，杨广对淮河以南地界与关中、中原等地迥然分歧的气候、气象产生了稠密的兴趣，垂垂地又生出了微服私行赶往广陵的设法。
张衡一提出明白的反对定见，段达、李浑等骠骑营将领皆拥戴着提出了各自的反对定见。
合法杨广心下踌躇之时，突听门路两旁的密林当中有人打了个清脆的呼哨，紧接着就见从密林当中窜出二三十名身穿玄色软甲、手持四尺短戟的壮汉，挡住了来路。
刘方无法，只得趁出城门的机遇，公开里号令城门处的守军速报信给王韶，请他亲身来劝止杨广私行出行。
这伙人手中所持的短戟虽只要四尺多长，倒霉于向骑在战顿时的刘方策动打击，可他们手中的短戟需求时能够当作暗器来使。对峙的时候稍长，刘方才发明，这伙劫匪每人背后还背着个戟囊，囊中似是携有不上一只短戟，围攻起仇敌来，近一半的人结成步地围住对方，另一半的人瞅准空当时不时地向仇敌投掷短戟伤敌，令人防不堪防。
论单打独斗，这伙劫匪虽远不是刘方的敌手，可待二三十人一结成步地，将刘方围在了当中，刘方才发明，对方并不像本身想像的那样不堪一击。
杨广此时也从初遇匪人时的惶恐中规复了沉着，张眼向道旁的密林中环顾两眼，不见林中再有劫匪窜出，遂放下心来，伸手抽出腰间佩剑，对鲜于罗叫道：“随我冲上去，灭了他们。”
可杨广心中既存着一份微服私行的心机，便不肯在五百骠骑的随行护从下出城前去瓜口渡与来护儿汇合，趁一日张衡被王韶邀去盘点各路兵马的空当，背着段达、李浑等人，只带了刘方、鲜于罗两名近卫，对守门的军士诈称要到城内随便逛上一逛，悄悄骑马溜出了行台衙署，纵马扬鞭，直奔寿春南门缓行而去。
头两天，杨广已向淮南道行台的官员们详细探听了从寿春前去安州瓜口渡的路程线路，是以带着刘方、鲜于罗两人一出了寿春城，没有半点儿的迟延，当即顺着事前探听好的途径策马朝南跑了下去。
“王爷，此处不宜久留，我们还是趁早赶路，彻夜争夺赶到安州城内再歇宿吧。”刘方见门路两旁大树参天，阴风习习，实在担忧半道上会出变故，忙劝说杨广道。
“王爷，现在情势与八年前王爷出镇并州时大不不异，王爷身为三路伐陈兵马大元帅，一身安危关乎到伐陈的成败，切不成轻举妄动，因小失大啊。且淮南与关东、河北又有分歧，前次王爷微服私行，所过之地俱在大隋境内，而目下南陈军队虽已退守江滨，但据下官向王子相体味，彼仍经常派军袭扰江北官方，能够说目前江淮之间敌我两边占据地界仍处于犬牙交叉之势，王爷不成不谨慎处之啊。”
燕赵本多豪侠习武之士，刘方和罗艺且是万里挑一选出的河北懦夫，若论单打独斗，这为首的劫匪怎会是他的敌手。
王韶再三劝说，仍没法压服杨广，只得勉强承诺了他的这一要求。考虑到随杨广南来的骠骑营诸将皆为北人，不习水战，王韶专门给杨广派来了一名水军上将来护儿，卖力庇护和伴随杨广乘船巡查江面，取水路赶往广陵与高颖等人汇合。
但是，当他把这一设法流露给了张衡，收罗他的定见时，却遭到了他的激烈反对。
遵循王韶的安排，本应由张衡、段达等人带领五百骠骑护送杨广到达沿江的安州瓜口渡，再由在此等待的来护儿带领水军护送杨广从水路乘船逆流而下，赶往广陵。