La fàbrica de Cal Panes està situada a l'extrem nord del nucli urbà d'Olost, a l'est de la carretera BV- 4405 i al sud del polígon industrial. Es tracta d'un conjunt format per dos volums originals i envoltat per altres estructures fabrils més modernes. Els dos volums són de planta rectangular: el que es troba situat més al nord fa 42 x 15 metres, i l'altra 64 x 19 metres. Els dos estan construïts amb murs de maçoneria de pedra irregular arrebossats i cantonades diferenciades de carreus de majors dimensions, amb teulades de doble vessant i aigües a les façanes laterals. Estan formats només per planta baixa. A les façanes laterals dels dos volums s'obren grans finestrals i els accessos a l'interior estan formats per grans obertures.
El volum més petit, situat al nord, presenta 8 grans finestrals a la façana lateral oest. A la façana principal, sud, presenta un gran accés, un finestral i un petit òcul sota el carener.
El volum més gran té adossat a la façana oest un cos també de maçoneria de pedra arrebossat, teulada de doble vessant on s'hi obren grans finestrals seguin la tipologia del volum principal. La façana principal està arrebossada i pintada d'un color ocre. Presenta un gran accés principal i quatre obertures disposades irregularment.
