Izgradnja samostana završena je 1749. godine i nalazi se odmah pored crkve Presvetog Trojstva. Franjevci su 1786. godine, uredbom austrijskog cara, morali da napuste grad. Iste godine Sombor postaje sedište Bačko-bodroške županije, a zgrada sedište županijske administracije. Danas je zgrada sedište župnog dvora. Na južnoj fasadi zgrade nalazi se sunčani sat, napravljen 1852. godine, sa natpisom “Jedan ti je od ovih poslednji”.