De vrouwetoren staat er eenzaam bij op de hoek van de Vrouwesteeg/Nieuwehaven.

Onze-Lieve-Vrouwetoren maakte ooit onderdeel uit van de Onze-Lieve-Vrouwekapel. De kapel (met toren) werd gebouwd tussen 1489/1494 en was gewijd aan Maria, vandaar de naam. Toentertijd werd de kapel gebruikt als armenschool voor meisjes, waar zij kosteloos les kregen in lezen en godsdienst. Na de hervorming werd de kapel gebruikt voor diensten door de protestanten, tot dat zij gebruik gingen maken van de Sint-Janskerk. De kapel werd dus niet meer gebruikt en vervolgens werd hij afgebroken rond 1574. Alleen de toren bleef dus staan met een klok, die dateert uit 1590 en nog ieder slaat. In de toren zit een klein atelier. Hier worden mooie, handgemaakte glaskralen gemaakt en verkocht door Sandra de Graaf.