蔣介石不僅指使人彈劾白崇禧，而且還要他在罷免李宗仁問(wèn)題上表態(tài)，故意為難白崇禧。甚至他的家也被“國(guó)安局”查抄，屋里的所有物品被翻了個(gè)底朝天，連地板也被揭開(kāi)檢查。
1954年，“國(guó)大”一屆二次會(huì)議在臺(tái)北召開(kāi)。在這次大會(huì)上，有人彈劾白崇禧，羅列的罪狀有三條：第一是私吞中央銀行黃金7萬(wàn)兩；第二是私吞漢口中央銀行庫(kù)存白銀370余萬(wàn)兩；第三是在徐州會(huì)戰(zhàn)中，不遵守調(diào)令，擁兵自重。
身為“國(guó)大代表”的白崇禧馬上進(jìn)行反擊，他給每位會(huì)議代表發(fā)了一份答復(fù)書(shū)，駁斥對(duì)他的彈劾。這份書(shū)面答復(fù)后來(lái)在香港《工商時(shí)報(bào)》上刊載后，引起不小的反響，輿論明顯偏向白崇禧。此案后來(lái)也就不了了之。這次彈劾，其實(shí)就是在蔣介石的授意之下進(jìn)行的。
蔣介石不僅指使人彈劾白崇禧，而且還要他在罷免李宗仁問(wèn)題上表態(tài)，故意為難白崇禧。
白崇禧與李宗仁從統(tǒng)一兩廣到北伐抗戰(zhàn)，數(shù)十年如一日，甘苦與共，有著深厚的友情。老朋友遠(yuǎn)在美國(guó)，蔣介石已把他整得夠慘的了，現(xiàn)在又要他落井下石，白崇禧實(shí)在不愿意表這個(gè)態(tài)。但不表態(tài)又過(guò)不了關(guān)，最后只好在罷免李宗仁的聯(lián)署書(shū)上簽了名。
蔣介石為了報(bào)復(fù)白，凡是回?fù)衾钭谌蕰r(shí)，都要白為其出力，一有風(fēng)吹草動(dòng)，就要白出來(lái)說(shuō)話(huà)。1964年2月12日，李宗仁在紐約《先鋒論壇報(bào)》上發(fā)表公開(kāi)信，要求美國(guó)效法法國(guó)政府，承認(rèn)新中國(guó)，實(shí)現(xiàn)中美邦交正常化。李宗仁的這一舉動(dòng)，遭到了島內(nèi)親蔣報(bào)紙的攻擊。白崇禧也奉命致電李宗仁，指責(zé)他“迭發(fā)謬論”，要他“幡然悔悟，以保晚節(jié)”。深知內(nèi)情的海外人士明白，白崇禧身在臺(tái)北，已沒(méi)有說(shuō)話(huà)的自由，他給李的電報(bào)，言不由衷，實(shí)非得已。
白崇禧剛到臺(tái)北時(shí)，住在圓山，后來(lái)“臺(tái)灣省政府”騰出一些房子給從大陸來(lái)臺(tái)的公務(wù)人員居住，他便從圓山搬到松江路，后來(lái)買(mǎi)下了這所住宅。
就在白被除名的當(dāng)年，他的家也被“國(guó)安局”查抄，屋里的所有物品被翻了個(gè)底朝天，連地板也被揭開(kāi)檢查。白崇禧非常氣憤，他當(dāng)即給負(fù)責(zé)情治部門(mén)的蔣經(jīng)國(guó)打電話(huà)，問(wèn)這是怎么回事。蔣經(jīng)國(guó)答他不知道此事，要白直接去問(wèn)“總統(tǒng)”。白崇禧又將電話(huà)打到“總統(tǒng)府”，老蔣則稱(chēng)：“我知道此事，不僅對(duì)你如此，人人都應(yīng)該這樣來(lái)一次。”白崇禧氣得直翻眼，毫無(wú)辦法。
失去自由 受到監(jiān)視
在臺(tái)灣，白崇禧的行動(dòng)受到監(jiān)視，逐漸被“架空”，除了“戰(zhàn)略顧問(wèn)委員會(huì)”副主席這個(gè)空頭銜外，沒(méi)有任何職務(wù)。
白崇禧在臺(tái)灣，行動(dòng)也失去了自由。他的寓所對(duì)面是派出所，派出所的警員有不少就是特工人員。白公館進(jìn)進(jìn)出出的客人，常常受到特務(wù)的跟蹤和監(jiān)視。白崇禧喜歡下棋，以前軍務(wù)繁忙，但只要一有空，他總要拉部下殺上幾盤(pán)。來(lái)臺(tái)灣后，也經(jīng)常請(qǐng)人來(lái)陪他下棋。可后來(lái)，因老受情治人員的盤(pán)問(wèn)，再也無(wú)人敢來(lái)陪他下棋了。白崇禧同臺(tái)灣軍政界上層人士的聯(lián)系無(wú)形之中被隔開(kāi)。
白崇禧喜歡打獵，有一次他一時(shí)興起，邀上幾個(gè)朋友開(kāi)車(chē)到位于臺(tái)中的阿里山去打獵。他們一行到了山腳下，然后乘小火車(chē)上山。
這天天氣晴朗，好久沒(méi)出門(mén)的白崇禧心情很好。阿里山古木參天，鳥(niǎo)蟲(chóng)啁鳴，坐在小火車(chē)?yán)锏陌壮珈咧鑳海勚^(guò)去在廣西打獵的一些往事。
鐵路是單行線(xiàn)，出發(fā)前已與山上打過(guò)招呼，可是火車(chē)開(kāi)出車(chē)站沒(méi)多遠(yuǎn)，忽然山上一列小火車(chē)疾駛而來(lái)。好在上山的火車(chē)剛剛出站，速度不是很快，白崇禧急忙跳下車(chē)，才幸免于難。
這次差一點(diǎn)發(fā)生的事故，是屬偶然，還是有人故意所為，不得而知。從此，白崇禧再也不敢外出了。