1950年1月中旬，姚槐与他的副司令雷啸空率部由越南打回广西境内的九特，白崇禧又派飞机为姚槐部三次空投光洋和枪弹一批。姚槐发誓要打回老家过新年。果然，除夕之夜，姚槐率部攻入广西思乐县城海渊，进占县城达3日之久。直到解放军向县城反攻，姚槐才率部退出海渊县城。
1950年5月3日，解放军集中一个加强团的兵力，冒着暴风雨，以一昼夜90公里山路连续行军，分三路奔袭，直捣姚槐部驻地广西上思县南的勒贡屯，歼其一部。6日，解放军追踪直扑姚槐老巢思乐县固边那利村，活捉姚槐部十一团团长戚仪仁以下120人，缴获机枪6挺，步枪32支及降落伞23张。当解放军冲进姚槐的司令部时，姚槐刚刚潜逃，他床上的被窝还是热的。
在解放军的连续追歼下，姚槐部损失惨重，再也无力在中越边境坚持游击根据地了。1951年6月初，姚槐孤身一人跑到西贡。法军总司令塔西尼上将召见了他，塔西尼希望姚槐留在越南继续指挥中国军队与法军合作。姚槐考虑后，原则上表示同意留越，但须到香港请示上级批准才能决定。
1951年6月17日，姚槐从西贡到香港，向黄旭初请示汇报。黄旭初说：“利用中越边境为反共军事基地，乃是我们梦寐不忘的，但须明了法国人的动机再说订约。”
姚槐在香港通知法方，希望派人到港商谈。不久，法方派政治局顾问Josa到香港与姚槐和黄旭初晤谈。黄旭初对Josa说：“我在1932年曾访问越南，翌年，李宗仁将军也应法越当局邀请往访。第二次世界大战前后，桂越邦交始终是亲睦的。我们为桂人，而又长久服务于桂，故对反共活动，特别想向桂区致力。但活动须有基地，而越南与桂接壤，实最适宜，故听了法方希望与姚同志合作的消息，很感快慰！我可在此表明，倘若将来合作能成为事实，希望法方了解几点：一、我方对越，绝无任何企图；二、我们的反共复国活动，必须与法方配合而不妨及法方；三、我们此种活动，完全出于自己的意志，并不按任何方面的命令。”
Josa对黄旭初的谈话很感兴趣，特别对黄旭初秘提之第三点声明最感满意，因为法国人极不喜欢逃入越南的桂系残部暗中接受台湾的命令或美国的支持，他们对越南的事情只想完全由自己自由支配。于是Josa说：“黄主席的话，我明白了，我们的合作已无问题，但法军统帅塔西尼将军现在已离越访美，须待他回来才能决定具体办法。”
塔西尼将军访问美国后，又返回巴黎治病，迟迟不能回越，后来在巴黎病亡。这期间中华人民共和国外交部发表声明，警告越南法国殖民当局，不得庇护和利用国民党残军在中越边境进行反对中国的活动。在台湾的蒋介石则通过黄杰控制了入越的这3万余白崇禧部残军，于是黄旭初策划的桂法越合作“反共复国”的计划遂胎死腹中。1953年夏，入越桂系残军3万余人被从富日岛运往台湾“归队”去了。
