De toren heette vroeger de Schrayershoucktoren omdat de stadsmuur hier een scherpe hoek maakte (van schray = "scherp"). De huidige naam zou de toren hebben gekregen omdat hij op de plaats stond waar in de tijd van de VOC vrouwen afscheid namen van hun mannen voordat die op reis gingen. Dit verhaal is waarschijnlijk apocrief.