桂萼真正德二年（1507年）中举，正德六年（1511年）进士及第。桂萼刚开始授予丹徒知县，后历武康、成安二县。他廉洁奉公，很有声望。但性刚使气，得罪权贵，因此久居下位，直到嘉靖二年（1523年）才升任南京刑部福建司主事。嘉靖三年（1524年），桂萼因在“大礼议”中极力支持嘉靖皇帝，深得嘉靖皇帝厚爱。仅四五年的时间，就由南京刑部福建司主事升到吏部尚书、武英殿大学士[1]。
桂萼在外为官，三个儿子在家跟他的兄长桂华读书。费寀（cǎi）写诗《送参军玉峰桂载使蜀》称赞桂载为官清正廉洁，“参军使节出长安，行路休嗟蜀道难。若到峨眉回首望，燕山亦在五云端。”[1]
