De stadspoort bestaat uit een hoofdgebouw met aan weerszijden twee achthoekige torens. Deze torens zijn door middel van vleugels verbonden met een lagere, in de gracht gelegen voorpoort die dateert uit de vijftiende eeuw. Deze tweede poort heeft twee ronde torens, waar in het metselwerk de Bourgondische vuurslag, een eenvoudig gehard ijzeren werktuigje om vonken uit een vuursteen te slaan, en de wapens van Oostenrijk en Haarlem zijn te herkennen. Aan de voet van de poort zijn overblijfselen van de oude stadsmuren te vinden. De stadspoort van Haarlem is vervaardigd uit rode baksteen, afgezet met roomwitte stenen. De leistenen daken steken hier duidelijk tegen af. De Amsterdamse poort zelf is niet meer toegankelijk voor publiek, hoewel het nog steeds mogelijk is de brug over te gaan en onder de poort door te lopen