La casa fou construïda per Josep Celga, teixidor de lli, casat amb una filla del Mas Miralles, i el seu fill Urbici Selga Miralles en el marc de l'assentament incentivat el 1857 pel senyor de Rajadell per poblar de noves famílies el sota castell i promoure la vinya. Els Selga no tenien casa pròpia (vivien al mateix castell, on eren teixidors, en una part habitada per vilatans) i ara obtenen una parcel·la de 60 x 40 pams per fer-s'hi la casa. Al 1860 la casa ja està acabada. La casa es deia Can Teixidor degut a l'ofici del constructor.
Els germans Josep i Francesc Selga Junyent, fills d'Urbici, van prosperar i van passar de teixidors a propietaris de terres. Van comprar als senyors de Rajadell el molí i la ferreria (Barri de Els Molins) i el Mas del Forn. Josep Selga va continuar a la casa i Francesc es va instal·lar al Mas del Forn. El fill de Josep, Francesc Selga Miralles, va ser l'introductor de la electricitat al poble de Rajadell, el 1923, atès que va arribar a un acord amb la Companyia Anónima Manresana d'Electricitat per construir la línia de Manresa a Calaf a canvi de la distribució de la electricitat als pobles intermedis. A pocs metres es troba el Transformador d'electricitat de Cal Selga (fitxa 122), construïda el 1923 per Selga. El seu fill, Josep Selga, fou alcalde de Rajadell durant 19 anys, als anys 50 i 60 del segle XX (també jho va ser el seu pare el 1939).
Molins (2020:52-55) ofereix molts altres detalls de la familia que ha habitat la casa.
