O Convento de Nossa Senhora da Esperança foi fundado a 12 de Novembro de 1563, sobre uma anterior capela medieval. De arquitectura manuelina e renascentista, foi ocupado por frades franciscanos, tendo sido destruído pelas chamas no séc. XVIII, apenas tendo resistido a capela.
O convento foi extinto em 1834. Em 1986 foi classificado como Imóvel de Interesse Público.
Em 2001 o local foi transformado numa prestigiada pousada, ao qual a sala de convívio e o bar são resultado da adaptação da capela e da sacristia, e como curiosidade os 24 quartos são identificados com nomes de frades.