Budynek dawnego klasztoru jezuitów zbudowany w stylu barokowym w latach 1729-1744. W latach 1729-1731 zbudowano skrzydło wsch. wg projektu jezuickiego budowniczego brata Jakuba Ruoffa/Rouffa, 1736-1740 skrzydło południowe, 1741-1744 skrzydło zachodnie (zburzone w 1885 roku). Obecnie klasztor jest połączony z kolegium jezuitów (obecnie Kurią Biskupią) współczesnym parterowym łącznikiem wybudowanym w latach 1989-1990. Klasztor został wzniesiony jako budynek piętrowy, podpiwniczony, z głównym wejściem od północy. Klasztor składa się z trzech skrzydeł ustawionych w kształcie litery U otaczających dziedziniec (zachodnie skrzydło jest rekonstrukcją i zostało odbudowane w latach 1993-1994). Po 1989 roku zdjęto dachówkę ceramiczną i położono na dachu blachę.

Od północy dziedziniec klasztorny zamyka XVIII-wieczny budynek gospodarczy położony na rogu ul. Mickiewicza i Jana z Drohiczyna, parterowy, na rzucie litery L, o elewacjach podzielonych pilastrami.