Ruïnes.
La primera referència d’aquest castell data de l’any 1158, quan Ramon Guillem d’Òdena l’encomanà a Arnau de Castluç, que el posseiria com a feudatari del seu fill Pere d’Òdena.
L’any 1245, hi hagué un plet entre Ponç de Calders i el prior de l’Estany per la senyoria del castell de Segur, on el primer al•legava que el vescomte de Cardona li havia lliurat.
L’any 1332 n’era senyor Ramon de Calders.
En el fogatjament de 1365-1370 comptava amb cinc focs i pertanyia a “Matheu de calders donzell”.
L’any 1380, l’infant Joan vengué a Mateu de Calders els mer i mixt imperis i la plena jurisdicció dels castells de Segur i Miralles, quadra de “porta espena” i Vilamajor, per 500 florins d’or.
L’any 1463, els castells de Segur, Copons i Veciana estaven sota l’obediència del rei Joan II.
L’any 1473 n’era senyor Joan de Calders.
A començaments del segle XVII Miquel de Calders n’era senyor dels llocs de Segur, Sant Martí, Veciana i Miralles, tenia diverses qüestions amb els veïns de Prats del Rei, per voler apoderar-se de la jurisdicció de la vila.
L’any 1671 n’era senyor el baró Baltasar de Pantoja.
En el segle XVIII passà als Grimau i més tard als Vilallonga.