Basilica di Santa Maria di Collemaggio on harvinaislaatuisen kaunis pieni kirkko, joka valmistui juuri sopivasti paavi Celestinus V:n virkaanastujaisjuhlia varten vuonna 1294. Celestinus, oikealta nimeltään erakkomunkki Pietro da Morrone, vastusti itse valintaa viimeiseen asti. Hän jopa pakeni vuorille eikä suostunut tulemaan alas ennenkuin kaikki kardinaalit ja pari kuningasta oli käynyt ensin maanittelemassa ihmisarkaa munkkia ryhtymään Pyhän Pietarin perilliseksi. Paavina Celestinus ehti julkaista vain kaksi ediktiä. Ensimmäisessä hän määräsi, että uutta paavia valittaessa kardinaalit on lukittava sisään eikä heitä saa päästää ulos ennenkuin yksimieliseen päätökseen on päästy. Toisessa ediktissään hän julisti, että paavilla on oikeus halutessaan luopua virastaan - ja saatuaan tämän hyväksytyksi hän käytti tilaisuutta välittömästi hyväkseen ja luopui tiarasta 13.12.1294. Syyksi hän ilmoitti kaipuunsa yksinkertaiseen elämään ja syvän vastenmielisyytensä kirkkopolitiikkaan.

Historian vastentahtoisimman paavin pyrkimykset palata takaisin erakkoelämään menivät kuitenkin päin prinkkalaa. Syistä, jotka eivät ole jälkipolville aivan selviä, hänen seuraajansa Bonifacius VIII lähetti sotilaansa Pietron perään. Lukuisista pakoyrityksistä huolimatta he onnistuivat vangitsemaan munkkiparan Fumonen linnaan, jossa hänet murhattiin. P. Celestinuksen ihmeitätekevää pääkalloa (jossa on epäilyttävä reikä) säilytettiin sitten reliikkinä Santa Maria di Collemaggiossa Aquilan kaupungissa, kunnes kirkko tuhoutui maanjäristyksessä vuonna 2009. Pyhä pääkallo säilyi ihme kyllä ehjänä, mikä on tietenkin vähintä mitä kanonisoidulta pyhimykseltä voi odottaa.