清咸豐六年(公元1856年),江西邊錢會聯(lián)合廣東的太平軍攻下了新城(在今江西黎川)、貴溪(在今江西貴溪),下一步準(zhǔn)備進(jìn)攻廣信(在今江西貴溪以東的信江流域)。廣信知府沈葆禎寫血書向總兵饒廷選告急。
這時(shí)，賴高翔正跟從饒廷選駐防在玉山(在今江西玉山),得告急書后立即日夜兼程趕往廣信。饒廷選所部將士向來就很少，只有賴高翔和畢定邦以勇敢善戰(zhàn)而出名。行軍途中他們不購買糧草，宿營時(shí)也不建扎營房，所以行動較為迅速。他們到達(dá)廣信不久，義軍很快也就趕到了。他們堅(jiān)守在城中，多次打退了義軍的進(jìn)攻。圍城義軍的兵力越來越多，幕府中的官員們都極為害怕，慫恿饒廷選撤軍，放棄此城。賴高翔、畢定邦憤怒地說：“你們既然這樣膽怯，還不如當(dāng)初不來。現(xiàn)在我們在城中，敵人不知我們的虛實(shí)，以為我們能從玉山趕來援救廣信，后面肯定還會有大批的援兵。假如我們棄城逃跑，敵人知道我們兵力少，他們的士氣就會更壯，定會追擊我們，將我們?nèi)繗灉?。還談什么撤回浙江境內(nèi)呢？ 我們愿意替各位同敵人決一死戰(zhàn)，明天請看我們怎樣打敗敵軍！”
第二天，賴高翔和畢定邦打開城門，沖向義軍陣地，從早晨直殺到日落，摧毀了城外義軍的所有營壘，殺死義軍3000余人，斬義軍首領(lǐng)數(shù)人，其余的義軍只得迅速撤走。