Der alte Pfarrhof ist ein, nach 1665 erbautes, ehemaliges Schwarzwälder Bauernhaus, zu dem das Gelände gehörte, auf dem heute die Kirche und ein Großteil des Dorfes liegen. Die Breitnauer Pfarrer ließen diesen Hof bewirtschaften und bestritten damit ihren Lebensunterhalt.
In den 70er Jahren wurde er unter großem Einsatz ehrenamtlicher Helfer liebevoll restauriert und ist heute das Gemeindehaus der katholischen Gemeinde. Kirchliche Gruppen und Vereine stehen die Räumlichkeiten für ihre Arbeit und zur Begegnung zur Verfügung.
Im Alten Pfarrhof ist auch die öffentliche Bibliothek untergebracht und im Keller die Ministrantenräume.
Die Räumlichkeiten des alten Pfarrhofes werden auch für bestimmte Anlässe und Feierlichkeiten vermietet.