A tekintélyes késő barokk stílusban épült Líceum épülete, melyet a XVIII. sz. végén egyetem céljából építtetett Eszterházy Károly gróf, s ahol ma már egyetemként is működik.

A főhomlokzat hármas kapuján belépve ovális kapucsarnokba jutunk, majd a kétkarú lépcsőházba. Az első emeleten a főlépcsővel szemben nyílik a díszterem, mennyezetét Franz Sigrist hatalmas freskója díszíti, és az egyetem négy karát, fakultását ábrázolja. A jogi kart az Igazság szobrával és a Hétszemélyes táblával, a bölcseletet földméréssel, csillagászattal, katonai és politikai földrajzzal; az orvoslást boncolással, gyógyítással; a teológiát egyházatyákkal, angyalokkal, égbolttal és allegorikus képekkel jeleníti meg.

A Líceum első emeletén tekinthető meg az országszerte híres Egyházmegyei könyvtár, ahol számos régi kódex, kézirat, s a Magyarországon fellelhető egyetlen eredeti Mozart-levél is látható. Az épület tornyában működő Csillagászati Múzeum és "Specula" periszkóp szintén kuriózumnak számít.

A líceum 1765-től 1785-ig épült. Az eredeti terveket J.I. Gerl készítette, melyeket némileg módosított Fellner Jakab építész. Az építőmester 1765-től Povolny János volt.

A líceumnak nevezett épületben 1793-ban kezdődött meg az oktatás. Az idők folyamán jogakadémia, líceum és tanítóképző működött az épületben, 1949-től tanárképzés folyik itt. Hosszú ideig viselte a Ho Shi Minh nevet, majd 1989-ben felvette az alapító nevét. 1999-től már nem tanárképzőként, hanem általános főiskolaként tartották nyilván.

Az egyetem névadója az építtető, Eszterházy Károly püspök, aki szívügyének tekintette az oktatást. "Soha semmi sem szerezhetett volna lelkemnek nagyobb örömöt ennél...mert hiszen, amikor ennek a líceumnak alapjait lefektettem és nagy költségemmel be is fejeztettem, semmi másért nem tettem, mint szeretett hazámért és a közjóért, hogy itt a Múzsák otthonában, a királynak hű és a hazának hasznos polgárokat formálni lehessen" - írta.