Kurz nach dem Bau der Kirche entstand 1491 das neue Pfarrhaus. Pfarrer Johann Jakob Gugger liess es 1588 um ein Geschoss erhöhen und verbreitern.
Im 17. Jahrhundert erfolgten weitere bauliche Veränderungen, wovon eine bemalte Holzdecke zeugt. Erst im 19. Jahrhundert entstanden die heute die Südfassade dominierenden Holzlauben.