Pantheoni kontrollides saate vaimselt reisida kaks aastatuhandet minevikus ja näha paganlikke jumalateenistusi ohvritega. Seest näeb tempel salapärane välja, kuna selles pole aknaid ja valgus tungib läbi kupli spetsiaalse augu - okulaari, mille läbimõõt on 9 meetrit.
Esimene Panteoni hoone püstitati keiser Augustuse ajal 27–25 eKr. e., kuid hävis tules 1. sajandi lõpus. Keiser Hadrianuse valitsusajal ilmus hävinud templi kohale kupliline rotund, millel oli 14-meetriste Korintose veergude fronton ja ristkülikukujuline portik. See aastatel 118-125 püstitatud hoone on Rooma üks tähelepanuväärsemaid hooneid.
Templi eesmärk oli pidada jumalateenistusi kõige austatumate jumalate nimel: Jupiter, Marss, Veenus, Merkuur, Saturn, Pluuto ja Neptuun. Sageli nimetatakse seda seitsme jumala templiks.
Iidsetel aegadel asus kuplis oleva ava all altar, mis oli ette nähtud ohvriloomade põletamiseks.
Hiljem (aastal 609) kingiti Pantheon paavst Boniface IV-le. Nii helde pakkumise tegi Bütsantsi keiser Phoca. Panteon pühitseti pühaks ja temast sai Jumalaema ja kõigi märtrite kirik.
XIV-XIV sajandil oli hoone kaitsefunktsioonina ja selle endine hiilgus anti renessansi ajal tagasi Panteonile. Taastamine toimus Raphaeli eestvedamisel, kes maeti 1520. aastal Pantheoni.
17. sajandil demonteeriti paavst Urbanus VIII korraldusel Panteoni portika ning selle taladest väljavõetud pronksi kasutati Püha Peetruse kiriku ja Püha Ingli lossi jaoks - aastal. esiteks püstitati altari kohale varikatus ja teises valati kahurid. Linlastele selline laastamine ei meeldinud, kuid selle vastu ei saanud midagi teha.
Kui Itaalia ühendati, sai Pantheonist kuningate matmispaik. Siin on Umberto I, Victor Emmanuel II ja kuninganna Margareti hauad.
