Per escriptures que es conserven a ca n’Oliveres Nou la casa podria haver-se bastit entorn de 1890. Francisco Serra Torrents, avi de l’actual propietari, ja va viure aquí. Procedia del mas Gordi, les terres del qual s’estenien fins aquest punt, per on passava la carretera de Parets, construïda entorn de 1917. Francisco era conegut com el Xiol Petit o el Xiolet; per això la casa era coneguda amb aquest motiu. Tanmateix, sembla que el sobrenom no agradava a la família i el van canviar per ca n’Oliveres. Però no se sap amb certesa el motiu d’aquest sobrenom, ja que el cognom de la família és Serra. S’ha dit que és perquè els Serra havien estat masovers de ca n’Oliveres Vell, i el cert és que fins a finals del segle XIX els masovers d’aquesta antiga casa tenien per cognom Serra. Tanmateix, els descendents de la família afirmen que els seus avantpassats procedien del mas Gordi i que no havien estat mai masovers de ca n’Oliveres Vell.
El fill i hereu de Francisco fou Vicenç Serra. Al llarg dels anys altres membres de la família van construir cases al costat de la més antiga, aprofitant antics coberts. Es tracta de cases força modernes. La més nova és la que està situada a l’extrem oest, de la dècada de 1960.