彭宠困守渔阳，眼睁睁看着耿弇攻城略地，将大半个渔阳郡收入囊中，心中苦闷万分。
杨太清安慰他道：“太守不必忧虑，并州牧兵强马壮，不日将兵临上谷，只要上谷受到攻击，耿弇必定去救，那时再收回蓟县不迟。”
彭宠想到那方士的话：“一遇太清，家宅安宁。”这话曾经应验，如今杨太清作为他的腹心，就在身侧，想必仍旧会带给自己运气。
那个年代，谶语十分流行，甚至成为一门学问，人们都相信这些，尤其是处于逆境之时，自身无能为力，只能将希望在这些神秘的东西上。
何况并州牧鲍永确实是出兵了，而且打了胜仗，刘秀的代郡太守闵堪损兵折将，连连败退。只要鲍永继续取得胜利，兵临上谷只是时间问题。而渔阳城坚粮足，足可坚守，彭宠觉得可以坚持到鲍永兵至。
耿弇似乎也不想和渔阳城较劲，把力气都放在了攻略周边各县，彭宠再不敢出兵去救，只是闭门自守，任由各县自生自灭。
又过了两个月，整个渔阳几乎都落到了耿弇之手，只剩下渔阳和要阳两县还在坚守。渔阳是郡治所在，彭宠亲自把守，要阳是都尉治所，也驻有重兵。
耿弇略定其余诸县，汉军围困渔阳和要阳。彭宠有心联络鲍永，接连派几路人马出城，却都如泥牛入海，再也没有回音。
渔阳城久困，彭宠闷在府中，很少出去走动。慢慢城中人心浮动，谣言四起，甚至有人说并州兵已经退走，渔阳城再无援军。
这时建威大将军耿弇的使者再次入城，对彭宠下达了最后通牒，令他三日内献城，若是三天内再不归降，便不再接受投降，只待城破，便将顽抗之人通通灭族。
彭宠大怒，喝令将使者推出斩首。血淋淋的人头挂出去，诸将见了都有些心惊。
渔阳令韩立私下里谏道：“太守，鲍牧守久无音信，或许是真的退兵了，雁门距此山河阻隔，中间尚有代郡和上谷两郡，上谷兵精，不容易对付。。。太守果真毫无归降之意么？”
彭宠道：“我意已决，勿再多言！”拂袖而去。
他虽然这么说，心里也有些狐疑不定。回到内宅与夫人商量，太守夫人却是个刚烈的，说道：“人要脸，树要皮，刘秀小儿负你，全忘了你当初功绩，吴汉、王梁当初都是你的手下，都已位列三公，唯独你这大功臣未见加封。刘秀不赏有功，却偏听他人一面之辞，要问罪于你，实在是欺人太甚！如今兵临城下，你若是降了，更要被别人看轻，一生一世抬不起头来，堂堂男子汉大丈夫，当昂首立于天地之间，为何要受这样的窝囊气呢？”
彭宠觉得夫人说的有理，可是如今穷途末路，困守孤城，援兵遥遥无期，不降又能怎么样呢？
彭宠又与杨太清商量，杨太清道：“不如我保着太守出城，向北出塞，自匈奴之地向西，绕路去并州，与鲍永合兵，再打回渔阳。”