Construída no século XV pela corporação dos mareantes e pescadores de Sesimbra, a Capela do Espírito Santo funcionou inicialmente como capela e hospital. Em 1755, o terramoto provocou danos consideráveis no edifício, que permaneceu encerrado até meados do século XX, altura em que reabriu como Biblioteca Municipal.