以前当过兵部尚书，现在是宰相之一的颜真卿站出来对拱手鞠躬行礼：“大王，大唐周围现在可以说已经没有什么敌人了，再保持庞大数量的军队是没有用的，至少臣是这么认为的，徒耗军费而已！现在朝廷军队的作用基本上只是用来维持内部的稳定，用不着太多的军队！微臣认为三十万军队已经够多了，如果有人认为这个数目太少，那么最多不能超过四十万！”
被任命为漠北卫戍大将军的李抱玉站出来抱拳道：“大王，臣认为四十万还是太少，现在大唐有二十二个道，平均下来，每一个道的兵力也不足两万人，更何况还有两京需要派驻重兵，万一有外敌打进来，我们岂不是没有任何多余的兵力拒敌与国门之外？臣认为裁军后所保留的军队最少不能少于六十万！”
赵子良看了一会看出了端倪，文臣们都希望尽量减少军队的数量，把大部分财政赋税用于其他方面，而武将们则希望尽可能保留更多的军队，如此一来，他们的统兵的数量就多，军费开支也多，为了要裁撤多少军队，文官和武将们可谓是争得面红耳赤、唾沫乱飞。
最后裁军的数量还是需要赵子良来拍板，赵子良经过慎重考虑之后拍板做出了决定：“这样吧，总兵力保留五十万，暂时裁撤六十万，日后视情况增减！这个数目就这么定了，接下来要讨论的就是禁军要保留多少、卫戍军要保留多少，地方军要保留多少，诸位都说说自己的看法吧！”
这个问题实际上就是如何裁撤那六十万人，这下没有文官们什么事情了，轮到禁军系统、卫戍军系统和地方军系统的军方大将们互相争夺了，围观们则站在一旁坐山观虎斗。
作为卫戍军的头面代表人物，张守瑜先站出来说道：“大王，卫戍军承担着各军区的卫戍任务，如有战事，卫戍军应该是第一个先赶到的，而且承担着最主要的作战任务，臣认为卫戍军的人数应该维持在四十万左右！”
作为禁军的头面代表人物，臧希晏当然不乐意了，“漠北王，你们卫戍军的胃口也太大了吧？禁军是整个大唐主要的机动军事力量，你准备留下多少人给我们禁军？如果你抢走四十万的名额，禁军和地方驻军就只剩下十万，如果对半分，各只有五万，地方军负责地方治安，人数不能太少，五万人分到二十二个道，每个道不足三千人，顶什么用？而我们禁军不但要负责京城长安的安全，还要作为机动兵力随时调往各处增援或作为主力大军作战，五万人怎么够？”
作为地方驻军指挥使的代表，河东道都指挥使韩游缳站出来道：“就是！漠北王，你虽然爵位高、年纪大，也不能这么欺负人啊，按照你这么分法，我们河东道每个县只有不足一百人的兵力，仅靠这么一点人马如何能守卫城池和维护地方治安和秩序？”
为了兵力的分配问题，禁军、卫戍军和地方驻军三分争得不可开交，双方都互不相让，最后还是赵子良做了决定，禁军保留十万人，裁撤二十万人；卫戍军保留三十万人，裁撤三十万人，地方驻军保留十万，裁撤二十万，一共裁撤掉七十万人。
裁撤掉的兵士和将校，精锐的一部分兵士分配到各县、各州、各道负充当衙役、捕快，被裁撤的军官和将校分配去做县尉、捕头，同时把原本的那些已经成了老油条的衙役、捕快们裁撤一部分，只留下肯干事、有本事的人，他们腾出来的位置留给被裁撤的一部分精锐兵士和军官，地方驻军如果素质不行，可以考虑全部裁撤，由被裁撤的禁军或卫戍军兵士充当，不过这些都需要地方官府的配合。