родился в Париже, в семье парламента Пьера Перро. В семье росло семеро детей, Шарль был младшим из всех. Он был рожден вместе с братом-близнецом Франсуа, но к сожалению, он умер через шесть месяцев после рождения. Его старший брат Клод Перро стал архитектором и автором восточной части фасада Лувра