Fils du président du parlement de Bordeaux, Jean de Carles, et de Jacquette de Constantin.
Beau-frère d'Etienne de La Boétie.