这样，刘秀一行才得以顺利出了城门。他们冒着霜雪，日夜兼程，继续向西南行进。而那些天特别寒冷，大家的脸、手，全被冻破裂了。
刘秀等刚到下曲阳(今河北晋县西),就听说王郎的大兵紧紧跟在后面，立马便追上他们了，一时间人心惶惶。当快到滹沦河时，有候吏来传报说正是解冻时刻，“河水流湛，无船不可济”,这样更使刘秀部下十分恐慌。刘秀令王霸亲自去看一看，果然如候吏所言，但为了安定众心，王霸回来并没有说实话，报称“冰坚可度”,这才动员了部众继续向前。让人想不到的是偏巧赶到河边，果然河冰已合，使大家安然度过。后来刘秀了解到细情，对王霸感谢不尽，王霸则认为是“神灵所佑”,“天瑞”如此。虽然这个事件不太可信，但也说明刘秀在这一段时期的确经历了极为艰难的生活。这一段生活，对他进一步熟悉和了解民间疾苦是大有好处的，使他深感到打天下之不易，也是他后来对农民施行缓和政策的思想基础。
刘秀一行继续南进到南宫(今属河北),因为遇上了特大风雨，于是就躲在路旁的空房子里暂避。这个时候房内刚巧砌有炉灶，于是冯异抱薪，邓禹生火，刘秀遂在灶火上烘烤湿衣服。冯异又想办法为刘秀烧得一顿麦饭，让他充饥。这两顿饭，使刘秀一辈子忘不了，一直到刘秀登基后六年，还向冯异下诏：“仓卒无萎亭豆粥，滹沱河麦饭，厚意久不报。”风雨过后，大伙儿又开始上路了。此时这支人马几乎是毫无目标地乱走一气，结果竟又北上至下博(今河北深县东南)西一带。到了这里之后，刘秀等人算是彻底失去了前进的目标，“逞惑不知所之”。就在这时，忽然一位“白衣老父”在道旁为之指点迷津：“努力!信都郡为长安守(意即为更始政权所守),去此八十里”。刘秀听后大喜，立即疾驰到信都，到了那里果然被太守任光热情接待迎进城里。这一事实后来被封建史家说得神乎其神，如唐朝史家颜师古在《后汉书》此条下注曰：“老父盖神人也，今下博县西犹有祠堂”。其实更有可能不过是一位好心的普通老人，出自同情心而向他作出指点，后来汉政府在此地建立了祠堂，神化了这件事。