Probablement tingui l'origen fa més de 200 anys, ja que sabem que en el segle XVIII es van crear moltes ordres religioses i associacions, com si hi hagués competència en l'afany de fer el bé. L'economia dels pobles era precària i de pobres n'hi havia més que ara, motiu que movia a les persones a buscar remeis. Sovint era la parròquia que, assabentada de les necessitats que hi havia, demanava l'ajut dels generosos. Era costum que, el diumenge a la missa, tothom portava el cistellet amb fruits de la terra que més tard eren distribuïts als qui ho necessitaven. També es celebraven algunes diades que recordem amb el nom de "afartar als pobres", les "farinetes de Núria" per Sant Pere, i el dia de "l'arròs i l'escudella", que tenen nomenada en molts pobles de Catalunya. No fa molts anys, en les festes anyals o de precepte, i enterraments, famílies determinades oferien pa en memòria dels difunts o donant gràcies a Déu, i fins i tot, hi introduïen diners que atipaven algun pobre. Hi ha llocs que, en dies senyalats, oferien a tothom un tall de coca i un porró, compartint així la festa. Castellgalí probablement ha seguit aquest camí, i com que la misèria ja ha passat, es recorden temps passats, no "afartant" però sí donant de cor "un panellet" a qui comparteix la festa. Actualment, tot i que es manté el símbol del panellet, aquesta és una festa de trobada dels habitants i nascuts a Castellgalí. La festa del Panellet sempre se celebrava el 8 de maig i era festa local, fos el dia que fos, però actualment es fa el primer diumenge de maig. Aquest dia s'anava en processó a beneir el terme des de l'era de Casajoana, amb les banderes i autoritats, costum que s'ha perdut de fa temps.