Né de Philippe de Chastellux (mort en 1520) et Barbe de Hochberg, mariés le 9 août 1502, il est le troisième de leurs fils.
Marié en premières noces à Jeanne de la Roëre (ou Anne, ou Catherine), dame de Chamoy en 1540-1541 (contrat : 31 décembre 1540 ; cérémonie : 7 février 1541). Veuf finn octobre 1549. Se remarie à Anne de Loges en 1551-1552 (contrat : le 22 avril 1551 ; cérémonie un an plus tard).