阿桂是根正苗红的满洲人，家世显赫，其父阿克敦，是乾隆朝的协办大学士、刑部尚书，实权大得很。有其父的聪慧基因遗传，他从小机敏过人，很会抓住本质，听人谈论历史，就知道历史人物做的每一个决策都有背后的权衡，外界影响，经常一语中的。雍正十年，16岁的阿桂入宫读书，乾隆元年，承荫其父大理寺丞，两年后，考中举人，一直到乾隆八年，一直高升充任军机章京。