虽然李不弃早有心理准备，但听了赵祯的话还是差点把鼻子气歪了——大宋君臣怎一个怂字了得啊！为了继续显示远见卓识，李不弃说：“话不是这样说的，交趾争不争智高，智高会不会内寇，并不在智高，也不在交趾，却全在我大宋。若是我大宋连智高这样积极内附，又与交趾有血仇之人都不能接纳，智高可能认为大宋连交趾都怕，他打不过交趾，自然要对他认为比交趾弱的大宋下手。而交趾见我自毁藩屏，定然也会以为我大宋怕了它，不臣之心难免更盛。臣以为接纳智高是小事，不接纳智高将致大祸！”
皇帝听李不弃把话说得斩钉截铁，就对原本的决定又动摇了，第二天便把左仆射庞籍、右仆射高若讷叫来商议，结果庞籍一句话就让皇帝打消了招抚侬智高的心思。庞籍说：“陛下，如今府库空虚，若是广南有事断无钱粮应付。且前日三司大火，簿籍档案损失颇多，虽然户部和警察司立即封存各路转运司簿册，但户部接手过来还需要一段时间，今年夏税征收是必要受到影响的。如此，哪有招祸之事不可为也。”
庞籍说的是按照官制改革的规划，三司应被拆分，职能并入户部、工部、枢密院。可就在三司应该向其他部门移交档案之时，突然一把大火烧了大半个存放档案的架阁库。这下，朝廷的经济部门全都无法正常运作，而且不知道什么时候才能恢复正常，连怎么收夏税都是个问题，更别说为出兵打仗提供钱粮了。
于是广源州和侬智高的事情就在朝廷上再次搁置下来，下半年黄河再次在郭固决口，就更无人关注此事了，只有清源书院的报社出钱请去交趾、占城和广源州的商人搜集那里的风土人情和地理气候情况并在报纸上刊登满足读者的猎奇心理。这个时候李不弃也不再表现出对广南的关注，甚至还故意淡出赵祯的视线，因为还有很多事要忙呢。比如这年秋天从倭国传来消息，说6奥国的安倍氏和朝廷的军队打起来了，而且还打败了朝廷的军队。这倭国开打了，就要赶紧多弄些人去抢地盘。幸亏现在大宋缺乏钱粮，庞籍他们也不提黄河下游移民之事，对海商招募人口出海也睁一只眼闭一只眼，大量灾民就被悄悄运往北海岛去。
直到皇佑四年五月从广南西路飞奔而来的信使带来急报称侬智高袭破邕州，自立建立“大南国”，称“仁慈皇帝”，年号“启历”。接着侬智高又占领横州，贵州，龚州，藤州，梧州……
每隔几天，骑着快马的信使就会报告侬智高又攻下哪座城池或者宋军又在哪里打了败仗，汴梁才真正真正被震动了。