掩掩的文书中，他知道髡贼不但火器犀利而且军力极其强大，
很快，在广州已经没有什么军务可以处理的了。来自海南岛的消息彻底的断绝了。髡贼的战舰封锁了琼州海峡，官军的船只已经不能在进入海峡了。
官场的风声传得比什么都快。大家都知道：王尊德完了。不但皇帝不可能容许这样的惨败，朝廷和地方上他的政敌和仇家们，也不会放弃这个大好机会。许多人已经在暗中谈论王尊德罢官甚至被逮入京的日子了。
官场的人心是最为世态炎凉的。这样的局面下他在广州成了一个无人理睬的总督。除了幕僚们之外没有人再来和他商谈什么。连广州知府和两县的县令都变得怠慢起来。无奈之中又迁回了肇庆。
在肇庆同样无事可做。他的脸色变得很是憔悴。因为舟车劳顿，到肇庆之后不久就病倒了。
塘报和文书依然源源不断的送到总督衙门来，但是幕僚们已经很少被召见去讨论下一步的军事方略了。其实幕僚们都很清楚，广东的兵力已经空了――除了东西山的防瑶参将之外，广东已经没有成建制的兵力了。
他的病情在这样的焦虑下一日重似一日，最让他的焦急的是髡贼不知道是否会趁势进犯广州－－如果这样，广东已经几无可御敌之兵了。
没有多少日子，就有塘报称，有形制奇特的船只在珠江口窥视。这些船只航行轻快，船身修长，和中国船只、红毛船只皆然不同，显然是澳洲人的快船。
面临的危机使得他不得不勉力支撑，几次召见幕僚们商议对策。加强珠江口的防御。
这一天他的精神略略好些。在书房里拆看文书。巡按御史高舜钦来了一份文书，他已上奏请求封锁广州湾，彻底断绝与澳门的葡萄牙人的贸易，“以绝匪类”。
王尊德此时只有苦笑了――如果澳洲人来攻打广州，澳门的葡萄牙人大概是惟一可以指望保卫珠江口的海上力量了，这会还谈什么“以绝匪类”。澳洲人这个更大股的匪类就要到来了。
“老爷，李赞画来了。”一个仆人小声的说道。
他无力地说：“请进来！”
李息觉进来了。自从吕易忠随军出征之后，他就成了王尊德最得力亲信的幕僚了。很多时候也只有他才能见到总督大人。
王尊德让人送上茶茗，努力露出来一丝平静的微笑。李息觉脸色苍白，坐下以后，望望督师的神色，欠身问：
“大人的身体可否好些了？”
王尊德微笑摇头，说：“偶感风寒，并无大碍。”他见李息觉的手里拿有一封文书，便问：“你拿的是什么文书？”
李息觉神色紧张地回答说：“是临高来得密信――”
“什么？”王尊德的手指都抖了起来，“何人所写？”
“是吕老爷。”李息觉用一种不齿又很紧张的语调说道，“信是昨日来得，因为大人卧病，卑职先看了。”
王尊德手指战抖，接过文书问：“吕赞画他……？”
“他还活着。做了澳洲人的俘虏。”李息觉忍不住叹息了一声，“信中所言甚详。”
王尊德颤抖着双手将文书匆匆看完，再也支持不住，顾不得朝廷大员的尊严，将手中的书信猛得摔到地上。
“可恶！这等无耻小人！”
李息觉见他面色潮红，呼吸急促，深怕他被气出病来，赶快劝解。总督的贴身仆人也跑了进来要扶他回里间床上休息。
“不用，我没有事！”王尊德摇了摇头，极其沉痛的说道，“想不到此人竟然如此无耻――即不能一死报国，又不能长做楚囚。居然写出这样的信来！”