Wann der Turm, der am Ende des Herrenteichswalls steht, errichtet wurde, ist nicht bekannt, doch wird er erstmals in der ersten Hälfte des 13. Jahrhunderts erwähnt. Er diente dem Schutz der Wehranlage und der auf einer kleinen Haseinsel stehenden Pernickelmühle. Diese wurde 1891 zerstört und anschließend am linken Haseufer wieder aufgebaut.
Im 19. Jahrhundert wurde der Pernickelturm umgebaut und Wohnungen eingerichtet. Nach 1945 folgte ein weiterer Umbau, so dass sich auf Grund der Wohnraumnutzung das Innere verändert darstellt. Sein äußeres Aussehen hat der Turm allerdings bewahrt, abgesehen von dem Anbau, der später hinzukam.






