La col·lecció va començar a crear-se pels volts de l'any 1970, quan es forma l'Associació Cultural Recreativa que, a part de fer-se càrrec del Casino, inicia diverses activitats: bàsicament el concurs de pintura ràpida i el museu. El novembre de 1979 s'inaugura la pinacoteca i el museu, a la planta baixa de la Rectoria. Segons el Regio 7 del 6.11.1979 «Trenta-tres obres exposades, més cinc que s'hi afegiran enguany; i eines, atuells i mobles en desús dipositats pels veïns. El condicionament de la Llar Gandhi i la commemoració del X Aniversari de la pintura ràpida han estat l'eix d'aquesta obra que sorprèn tothom qui la visita». Es van anar exposant al museu les teles premiades en el tradicional Concurs de Pintura Ràpida que tenia lloc cada any per la Festa Major de Sant Iscle i Santa Victòria (Festa Major de Rajadell), concurs que es celebrava des de l'any 1974, el segon cap de setmana del mes de novembre (Concurs de Pintura Ràpida Lluís Solernou" i "Concurs de Pintura Ràpida Infantil Venanci Vers"). Aquest concurs aplegava centenars de pintors (alguns dels quals molt reconeguts) que durant el matí de dissabte i diumenge pintaven imatges d'arreu del poble i del seu entorn, amb estils molt diversos. Els tres primers premis del concurs eren compensats econòmicament i els quadres eren exposats a la Pinacoteca, que s'anaven renovant annualment. Els concursos, que convocava cada dos any l'Asssociació Cultural Recreativa, es van celebrar de 1970 fins 2014. L'any 2014 l'ACR va convocar el darrer concurs, la 45 edició.