Enderrocat.
La primera referència d’aquesta fortalesa data de l’any 1039, quan la vescomtessa Engúncia, amb els seus fills Eriball i Folc, donaren al bisbe de Vic el castell de Calaf, el qual limitava al sud amb “ipsa turre de ipsa Guardia”.
L’esment de castell apareix el 1237, quan Ramon de Gàver i la seva muller Saurina cediren un mas i altres béns “in ipso Castro de Gardia Pilossa”,al monestir de Sant Benet de Bages.
L’any 1251, Berenguer de Cervera vengué aquest castell al rei Jaume “el Conqueridor”.
L’any 1379, el rei Pere “el Cerimoniós” vengué, a carta de gràcia, els “castris de Guardia Pilosa, Sti. Martini de Eclesiolis et de Veciana”, a Joan de Montbui, per 2.500 florins d’or d’Aragó.
L’any 1392, el rei Joan I el va vendre a “Mattheo de Calders, militi”, per 4.000 florins.
Al segle XVII aquest lloc seguia pertanyent a la família Calders.