根据湖南等地的地方志记载，这50万秦军是以王翦灭楚的主力组成，还有10万原楚国部队。但是南征百越也让秦军损失惨重，除去后来留守闽浙的10万秦军，进攻岭南的地区的40万秦军阵亡30多万，只剩下10万秦军戍守岭南地区。所以后来岭南军团的真正兵力应该在10万左右。
而在秦朝灭亡之前，岭南军团真的是因为戍边重任才没有回师中原的吗？其实不然，在得知秦二世昏庸，秦朝庙堂乌烟瘴气的情况后，岭南军团主将任嚣就曾下令严禁军队北上作战，并派重兵把守隘口险关，以防止起义军南下。
在任嚣病逝之后，赵佗接手岭南秦军，延续了任嚣的不准北上，加强防御军事部署，还铲除异己，安排亲信接管南海诸郡，封锁与秦朝联系。赵佗的一系列举措，既有维护岭南稳定，确保西南边陲不受叛乱冲击的公心，也有乱世战略自保，偏安一隅的私心。
秦朝灭亡后，公元前203年，赵佗封关、锁道，起兵兼并岭南各郡，建立南越国，自称“南越武王”。直至公元前112年，汉武帝刘彻起兵十万南征，南越国才就此灭亡，岭南地区再次回归中原王朝管辖。
岭南军团南征百越，收复岭南，稳定西南边陲，立下了不世功勋，但是秦朝灭亡时，常年征战实力受损的岭南军团其实已经没有了逆天改命的实力，再加上赵佗等将领的决策，让这只秦军主力直到最后也没有开赴救国的前线。
