La Casa Rectoral és un dels edificis més antics de la població, construït al peu del Castell.
La volta de canó del pont que està per sota d'aquesta construcció data dels segles XIII-XIV.
Existeix un document de l'any 1488 fet pel vicari del Papiol d'aquell moment que descriu amb detall els espais de la casa, que s'han conservat pràcticament igual.
En temps del R. Dr. Josep Rull hi hagué de vicaris, Mn Frederic Martí Albanell, autor de les Notes Històriques, Mn. Piña i Mn Pere Soler, entre d'altres. El darrer, conjuntament amb el jovent de la parròquia, va reconvertir la part baixa de la rectoria en un escenari en el qual s'hi van fer obres de teatre, els pastorets, la passió i, també, ballets.
Mossen Enric Aymerich va estar set anys com a rector i va habilitar la part baixa de la rectoria com a despatx i una habitació que servia de dormitori; la pimera planta va quedar com a sales de l'Esbarjo. Va ser l´últim que va viure a la casa (Faura Arís, 1996: 125).