De Anckerpoort was gelegen aan de oostzijde van de Boomgaardsteeg. Dat is makkelijker gezegd dan begrepen, omdat de steeg drie ingangen had. De eerste (en nog steeds bestaande) toegang was vanaf de Breestraat. Westwaarts lopend draaide de steeg halverwege naar links, uitkomend bij het Steenschuur. Maar het was ook mogelijk om rechtsaf te slaan en zo de oostzijde van de steeg te bereiken. Via een bocht naar links kwam men uit op de Langebrug.

Door de Buskruitramp van 1807 werd de Boomgaardsteeg bij Steenschuur en Langebrug – en daarmee de Anckerpoort – verwoest.

Waarschijnlijk bestond de poort al in 1585. Ze zal toen hebben toebehoord aan Gerrit Roelofsz. van der Mij die daar een huis, achterhuis en een flink stuk grond bezat. Rond 1600 wordt Jacques du Werchyn genoemd wiens erfgenamen in 1636/37 aan Beatrix van Heussen en Claes Willemsz. van Antwerpen ieder twee huisjes verkopen staende ende gelegen in seeckere poorte off gange, uytcomende aen de oostzijde van de Boomgaertsteech. Pas in 1685 is sprake van de Anckerpoort die dan als belending wordt genoemd.