Aquest castell també se’l coneix pel nom de palau de Palautordera, d’ell es tenen molt poques dades. La primera referència la data de l’any 908 on surt esmentat la “villa Bitaminia, que vocant Palacio”.
Segons Monreal-De Riquer aquest castell devia ser gran, però destruït pels voltants del segle XVI o abans, ja que per aquesta època s’aixecà l’església.
