此时此刻，虽然在形势上对吕布有利，但在局势上则等于是被孤立了。这当然并不是他自己的原因，要怪只能怪世风日下，人心不朴。然而，若不是徐州先前几经战乱，致使人烟萧条，土地荒芜，吕布也未尝不可在两三年之内发展起来。
随后，吕布便开始笼络周边与自己没有对立关系的势力。当时，在青州的边界有一座县城叫作莒（音“举”）县，属城阳郡管辖，县令名叫萧建。自从袁谭攻入了青州后，萧建便闭城自守，不与任何势力来往。于是吕布就写了封信给萧建，希望他可以加入自己的阵营。萧建同意了，并派遣使者带着财礼去拜见吕布，却不料途中被臧霸等一干人劫走。却说臧霸原本是陶谦手下的部将，陶谦死后便落草为寇了。这时臧霸率众攻破莒县，将之作为据点。吕布得知这一消息后，便打算率军攻打臧霸。此时，高顺却劝吕布不要亲自出击，否则一旦不能将对方攻破，必然会损害自己的威名。吕布没有听从，自顾率兵前往莒县。臧霸等人依城固守，吕布未能攻破，便又率军撤回。
依照资料显示，吕布此次出击的结果似乎印证了高顺先前所说的，然而事情却并非如此。莒县距离下邳大概几百公里远，为了速战速决，吕布便只带了骑兵出战。然而臧霸等人却没敢出城迎战，而骑兵又不利于攻城，所以吕布未能攻破，便只好又撤了回来。另外，据《英雄记》的记载显示，臧霸等人防守的时候用的是药箭，也就是毒箭，这是导致吕布没有强攻的一个主要原因。吕布的手里只有骑兵，而且数量不多，臧霸等人又不敢出城迎战，倘若他要一直在这里耗下去，是没有任何好处的。
我们都知道，史书上说高顺的陷阵营只有七百多人，虽然人数很少，但是战力相当强悍，说是每战必克。也许有人在奇怪，吕布怎么不把陷阵营给一起带去，这样不就可以攻破臧霸了吗？不得不说，凡有军事常识的人，都能够明白个中因由。倘若吕布将陷阵营也一并带走，袁术趁机袭击下邳怎么办？韩暹、杨奉再度倒戈怎么办？刘备趁机落井下石怎么办？史书有明确显示，在袁术攻打吕布的时候，吕布的手里就只有三千名士兵和四百匹战马。试想就凭剩下那么点人马，能在陈宫的率领下守得住偌大的城池吗？
想来，不少人应该都不大清楚，吕布军中的编制究竟是怎样的。吕布的军队只有三个编制，一是吕布亲率的骑兵队，二是高顺统率的精锐陷阵营，三是陈宫带领的常规兵。具体任务分工，吕布和高顺手下的两个编队，是负责攻坚的主力；陈宫手下的一个编队，则主要负责后勤和守备工作。
史书上又说自从郝萌叛变了以后，吕布就疏远了高顺，并将高顺的兵权划拨给同自己有外内之亲的魏续，每到出战的时候才又将兵权还给高顺。依我看，这还是写史的人在玩弄文字游戏。
高顺为人清白有威严，不饮酒，不受馈赠。对于这个跟着自己出生入死的部将，吕布自然是由于熟知信任其为人和能力，才会让他掌管精锐步兵主力的。吕布又不是一个是非不分的人，怎会轻易地就夺了高顺的兵权呢？难道吕布就不怕高顺会对此不满，得了兵权以后就倒戈吗？又或者吕布深知高顺是不会背叛自己的，因而才会大胆夺了他的兵权。倘若吕布深知高顺不会背叛自己，那就更不可能会这样对待高顺了。想来这事记述的还是不靠谱的。
若要说真实的情况是什么样，也许是吕布鉴于郝萌的前车之鉴，担心以后还会出现这样的情况，于是就委任高顺这个值得信赖的人去负责选拔人才的重任。因而高顺不在，陷阵营便暂时交由魏续接管。这时的吕布才刚占据下邳不久，身边急需各类人才，而高顺的为人是非常正直清廉的，因而委任他去选拔人才，是再适合不过了。而高顺一开始的都督一职，准确来说应该是都督从事一职，也许就是个负责选拔人才的职务。