У ХУІ ст. ділянка, що знаходиться навпроти костелу єзуїтів, належала Свято-Троїцькому кафедральному костьолу. Костьол споруджений стараннями луцького єпископа Юрія Фальчевського в 1545 р. Після пожежі 1724 р., у 1725-1726 роках храм відбудовується, проте пожежа 1781 р. остаточно нищить його.
Між 1545 і 1552 роками будується "дом костьольний мурований”, що зайняв в стіні Окольного замку чотири городні між Перемильською і Пінською баштами і мав завдовжки 14 сажнів, тобто 24 метри. Цей дім зберігся і донині. Він є північно-західною частиною П-подібного в плані так званого монастиря шаріток.
Після пожежі будівля монастиря шаріток передається школі, у зв’язку з чим переобладнується і значно добудовується. В частині П-подібного будинку, яка вціліла після пожежі 1781 р., влаштували притулок для дітей-сиріт, якими опікувалися монашки-шарітки. Монастир ширіток проіснував тут з 1829 р. по 1864 р.