Mūrinius barokinius rūmus 1691 m. užbaigė statyti LDK didysis etmonas Kazimieras Jonas Sapiega. Prieš tai šioje vietoje mediniai rūmai stovėjo jau XVII a. pradžioje. Brandaus baroko stiliaus architektūrinis Sapiegų rūmų ansamblis pradėtas kurti XVII a. pabaigoje. XVIII a. pradžioje jie sudarė vieną ansamblį su Trinitorių bažnyčia ir vienuolynu. Parko kompozicijos pagrindinė ašis eina nuo Antakalnio Skaityti plačiau.
