O nome do seu cume mais alto (Olimpo) recebeu o nome da primeira pessoa conhecida que o atingiu, Joaquim Olimpio Carmeliano de Miranda. É formado pelas montanhas: Olimpo (1 539 metros), Boa Vista (1 491 metros); Gigante (1 487 metros); Ponta do Tigre (1 400 metros); Esfinge (1 378 metros); Torre dos Sinos (1 280 metros); Abrolhos (1 200 metros); Facãozinho (1 100 metros) e pelo Morro Rochedinho (625 metros). A maioria destes picos é separada por diques de diabásio com orientação azimutal. É o caso da separação entre a Torre dos Sinos e o Abrolhos, chamada Desfiladeiro da Catedral, e entre a Ponta do Tigre e a Esfinge, chamada Desfiladeiro das Lágrimas.