李宗仁在其回忆录中就多次提到过白崇禧专权霸道，比如作为李宗仁的参谋长，前敌总指挥，白崇禧却一向独断独行，好在李宗仁胸怀开阔，不作计较，但北伐时白崇禧任北伐军参谋长，行事也是如此，老蒋当然就有怨言，李宗仁就替白崇禧解释缓狭，但桂系几次逼蒋下野，不能不让蒋对桂系严加提防。
李宗仁也还是对白崇禧专权有些不满的，比如对部下的提拔重用，在北伐军平定两湖江西等地后，桂系扩张很快，自然就要提拔部属有功之人，按军中惯例，须按资历和战功来提拔，这样才算公允。但白崇禧不顾李宗仁的感受和意见，越级提拔了自己的保定同学亲信陶钧和胡宗铎为军长，而资历和战功都更深的钟祖培还是副军长，钟当然觉得不公道，于是挂冠而去，李宗仁也不便强留。而这也为其他将领比如俞作柏、李明瑞等人叛桂投蒋埋下了祸根。可见白崇禧治军驭下的缺陷。蒋桂战争桂系大败，主因就是桂系内部分裂瓦解。
蒋桂战争，桂系败落，黄绍纮脱离桂系投靠了老蒋。但保证不做不利于桂系的事，并尽量帮助桂系。这一点，桂系三巨头还是不错的，没有因此翻脸。黄绍纮后来还真的受到了老蒋的重用，并且也照顾到了桂系。
抗战胜利后，李宗仁竞选副总统，黄绍纮幕后出谋划策，功劳最大，尤其是对孙科孙大少的私生活的揭露，以及让李宗仁以退为进的竞选策略，都出自黄绍纮的策划，李宗仁才得以荣登副总统大位。但白崇禧却因为李宗仁当上了副总统而被老蒋免去国防部长之职，外放华中剿总司令。白自觉被贬，避居上海，赌气不肯赴任。老蒋派多人前去促驾，白就是不答应，老蒋于是请黄绍纮出面劝白崇禧。
黄绍纮到上海对白崇禧说，此次赴武汉就任华中剿总司令，是个天大的机会。因为国民党军事上败相已显，李宗仁现在已任副总统，位居中枢，你去武汉掌握住兵权，等到老蒋大败，嫡系尽失，那时你重兵逼老蒋下野，李宗仁自然就会升任总统，桂系也就能彻底翻身了。白崇禧听后顿觉拨云见日，高高兴兴地赴武汉就任了。
局势的发展还真被黄绍纮料中，三大战役，老蒋嫡系尽失，白崇禧通电倡导国共和谈，逼老蒋下野，李宗仁果然做了代总统。并派黄绍纮参与国共北平和谈。黄绍纮认为国民党败局已定，无力挽回，桂系应该趁自己还有实力，与中共合作，抛弃老蒋，才有出路。但白崇禧坚持要和中共划江而治，黄白二人为此争吵，恶语相向，差点动武。李宗仁犹豫不定，最后还是站到了白崇禧一边，寄希望美国人的援助。黄绍纮认为这是死路一条，道不同不相为谋，于是投向了北平。三人最后分道扬镳，李宗仁远赴美国做了寓公，白崇禧去了台湾，黄绍纮留在了大陆。
桂系三巨头，大略上并无自己坚定的政治理念，雄才上也没有聚集海内一流的人才。靠的是白崇禧推崇的武力和黄绍纮的投机权谋。最后失败，在所难免。
李宗仁在其回忆录中评价部下夏威，陶钧和胡宗铎为莽汉愚夫，其实也就是在评价他和白崇禧黄绍纮自己：
夏、胡、陶三人都是革命军中第一流的战将。然因百战功高，本已有骄蹇之态，一旦战事平息，住入繁华的大都市，经不起声色犬马的诱惑，都娶了年轻的新欢，宴安鸩毒，目无余子；及卷入政治漩涡，又因缺乏政治素养，难免误事。
李黄白三人结局也颇令人浩叹，黄绍纮在大陆被打成右派，文革时被批斗抄家，黄以剃刀刎颈自杀。李宗仁耐不住海外寂寞，回归大陆，虽说落叶归根，但也死的蹊跷。白崇禧在台湾被解除一切权利，传言被老蒋害死。桂系三巨头无一善终。
