占据大半个高密郡后，始终攻取诸城不克，于是将老巢设在了安丘县。
刘兰成率队到了离城四十里的地方留下十人，命众人多割草，并把草堆成一百多堆；到了离城二十里，又留下二十人，让他们分别扛着大旗等待；离城五六里，又留下三十人，命他们埋伏在险要之处。
这时刘兰成带着十人半夜悄悄地埋伏在离城一里多的地方；其余八十人分别安置在其他的地方，并和他们约定听到鼓声后立即出来抢夺人畜，点燃草堆，然后马上离开。
第二日一早，城内外尽是来往赶集的人。刘兰成探得今日是牛羊买卖的大集，这才选择这一日。
到了中午的时候，刘兰成带着十人径直抵达城门，发起了攻击。
十个人的攻击，不过是稀拉拉地射了几箭，跟儿戏一般。但这却让城中的贼军如临大敌。臧君相早听说隋军主力兵临北海郡，于是严令各城加紧防御，勿使隋军偷袭。
此时城头上钲鼓乱敲，城下乱做作一团。
而刘兰成预备的伏兵也突然杀出，劫掠了一些牲畜，便向北撤去。此时城中守军追击，不过这群人警醒的很，根本不敢急追。
追兵走了没多远，发现前方有旌旗摇动，烟火滚滚，担心有伏兵，不敢再进，立刻便撤了回去。
刘兰成如此折腾了一番，并没有什么大战果，诸人也心中生疑，不解其意。
刘兰成也不解释，又如法炮制了一遍。不过这次效果不如上次，他们逃跑之后，城中守军追了很远，甚至还发现了他们点燃的草堆。
这时城中守军返回，将发现禀报了臧君相。
臧君相听闻此消息，立刻便猜测隋军根本没有什么伏兵，旌旗、烟火就是蒙蔽他们的，隋军的目的就是劫掠和袭扰。
于是对于没有趁机追击，臧君相很是后悔。
过了几日，刘兰成便劝蔡知运趁机攻打高密城，而刘兰成本人则带着三十人换上臧君相部下的衣服，埋伏在城外。
等到隋军再次上演前两次的计策之后，臧君相以为又是隋军的疑兵之计，于是下令打开城门，追击隋军。
城中盗匪争相出城追逐，一头扎到隋军的怀中。
一众盗匪猝然遇袭，立刻大乱，众人争相讨回城中。而潜藏在城池附近的刘兰成一行也混在其中，跟着入了城。
此时各家混乱，众人急于逃命，根本就没人注意到他们。
刘兰成一行闯入城中，在城门之处，忽然暴起，诛杀守城的臧军士兵。盗匪不敌，被刘兰成一行连杀五十多人，失了城门。
刘兰成占领城门之后，打开城门迎隋军入城。
而此时蔡知运从后率主力赶到，趁机攻城。臧君相所部，空有人数，但连乌合之众都算不上。于是贼匪溃乱，隋军趁势掩杀，臧君相单身落荒而逃。
蔡知运又率军追击，连克郡中诸城，终于在胶西县（今高密县高密镇东南）将臧君相斩杀。
至此，高密一郡遂平。