在东汉建立之初，国内尚未统一，许多地方势力占据某些州郡和东汉抗争。有的虽然表示臣服东汉，实际上都仍旧保留地盘，并不甘服。而部分比较强大的农民军也相当活跃。刘秀花了5年多时间，才算打下了一个基本统一的局面，只剩甘肃的隗嚣和四川的公孙述两大军阀。这时，隗嚣表面上已向刘秀称臣，并且把儿子送到洛阳任官，表示归顺。公孙述自称蜀王，拥兵数十万，盘踞四川山区。因交通困难，刘秀对这两个人，暂不想征战，企图把连续苦战多年的部队好好整顿和休养一下再说。据《后汉书·隗嚣传》载，当时刘秀曾对将领们说：“且当置此两子于度外耳！”（姑且把这两人丢在一边，暂不考虑吧！）后来，刘秀终于发兵，先消灭了隗嚣，接着又把公孙述的独立王国攻破。 

上述《后汉书》所载刘秀那句话，就是成语“置之度外”的来历。