De zusters namen hun intrek in het gerestaureerde, uit de zeventiende eeuw stammende Algemeen Burger Gasthuis, het voormalige Sint Margrietenklooster.

In 1839 werd op gezag van het vicariaat Breda het klooster afgescheiden van de Franciscanessen Alles voor Allen uit Breda en verheven tot zelfstandige congregatie, de Franciscanessen van Bergen op Zoom. Het kloostertje kreeg aanvankelijk een geïmproviseerde kapel. Nadat het gasthuisbestuur besloten had om een kapel te stichten, werd deze in 1851 gebouwd door architect-aannemer P. Soffers uit Ginneken.

In 1880 besloot men tot de bouw van een nieuw ziekenhuis, omdat aanpassing van het bestaande gebouw vanwege de beperkte ruimte niet mogelijk was. In 1882 nam de congregatie het gasthuis over om het exclusief in te richten voor de bejaardenzorg. Daarna werd de oude kapel afgebroken en bouwde men in 1894-1895 op de binnenplaats het bejaardentehuis met de Sint Catharinakapel. C. van Genk ontwierp de kapel in neogotische stijl.

In 1933 verlengden de gebroeders Oomen deze kapel in dezelfde stijl, waarbij ook de voorgevel werd versoberd. In de westgevel van de kapel is een nis aangebracht met daarin een beeld van de heilige Catharina met het rad.

Nadat de congregatie het eigendom over het Sint Catharina had verworven werden in de directe omgeving van het gebouw vele panden en percelen opgekocht. Een wirwar van afdelingen ontstond. Aan deze onoverzichtelijkheid kwam een eind toen in 1929 onder leiding van architect P. de Nijs begonnen werd met de bouw van een geheel nieuw gasthuis met de hoofdingang aan de Vischmarkt, vanaf 1938 Sint Catharinaplein geheten. De gevel vertoont stijlelementen van de Amsterdamse School.  

Sinds 1930 was het moederhuis hier gevestigd. Het oude Algemeen Burger Gasthuis werd in 1975 verbouwd en vernieuwd en werd een verpleeghuis voor bejaarden. 

Ook nadien werd volop rond het gasthuis gebouwd, totdat rond 1981 vrijwel de hele bebouwing tussen de Minderbroederstraat, Geweldigerstraat, Sint Catharinaplein en Klaverstraat in bezit of gebruik van de congregatie was. 

In 2009 vertrokken de laatste zusters. In 2014 werden ook de bewoners van Zorgcentrum Catharina, “’t Ketrientje” in de volksmond, elders gehuisvest. Er wordt nog gezocht naar een nieuwe bestemming voor het gebouw. 

[Het verhaal is aangevuld met een foto. 10-04-2017. Redactie]