Fils de Claude Rouge et de Marie Anne Bardy, il naît à Samoëns le 16 janvier 1723 et s'engage dans la voie ecclésiastique. Il est chanoine de la cathédrale de Genève.