Ignora-se a data exacta da sua fundação, afirmando alguns ter sido erigido em 1495, no eremitério de Nossa Senhora das Graças. O mais antigo testemunho escrito da sua existência é um alvará de D. João III de 1532. Deste reinado parece ser a maior parte do edifício, tendo o respectivo templo sido sagrado em 1546. Foram seus padroeiros até 1789 os Condes de Santa Cruz que, nessadata, transmitem a sua dignidade aos Marqueses do Lavradio. A comunidade regular era governada por um guardião e albergava 10 religiosos de hábito e três leigos. O convento é extinto e logo abandonado, em 1834.