Das Pfarrhaus von Neustadt direkt neben der St.-Jacobi-Kirche gelegen ist neben dem Rathaus das prominenteste Gebäude in der Stadt. Und es ist das älteste Haus von Neustadt überhaupt. Vor über 400 Jahren, 1616, wurde an dieser Stelle das Pfarrhaus errichtet. Berühmte Persönlichkeiten hatten hier ihre Wirkungsstätte, so auch Magister Wilhelm Leberecht Götzinger. Er gilt mit seinen Beschreibungen über die Region als Erschließer der Sächsischen Schweiz. Auch Gabriel Reich hatte hier gewohnt, der Retter von Neustadt im Dreißigjährigen Krieg gegen die Schweden.