下诏命已经下来了，现在就是去也得去，不去也得去，容不得再有反悔，我们明日动身，兄弟们都去做准备吧。”
众人散去后，刘秀向叔父刘良辞行。
刘良说：“此行必然千难万险，家中还有门客十人，都是伯升当日的门客，伯升出事后，别的门客都散去了，只有这十人一直留在家中照顾我。他们对伯升都是忠心耿耿的，你都一并带去吧。”
这一句话倒提醒了刘秀，刘秀叫来众人说：“虽然朝廷不给我们派兵，我们可以自己带些门客、家丁，你们大多都是颍川人，谁愿意返回家中带些门客、家丁的，现在就返回家中，记得只求精不求多，我们与孟津渡口汇合。”
就在刘秀在孟津渡口等待兄弟们汇合的时候，一封五百里加急又送进了洛阳。
刘赐说：“陛下，李宪不接受庐江侯的册封，并杀了派去的招抚使，说是什么，既尊王何复侯，看来已经决心与我朝为敌了。如今北方未定，赤眉又虎视眈眈，臣怕若此时出兵剿灭李宪，洛阳空虚，不如迁都长安后再行讨伐。”
刘玄问道：“长安如何？我曾问过文叔，文叔说长安远胜洛阳。”