L’any 1183, Arnau Darnius, sagristà de Girona, fa esment en una sentència de la “carta forum de Calidis”, en aquest document surten anomenades diverses persones amb el cognom de Caldes.
Inicialment aquest castell pertanyia al vescomtat de Cabrera; al 1240 es troba lligat al de Llagostera, de domini reial, aquell mateix any, el rei Jaume I concedí diversos privilegis i franqueses als homes d’ambdós castells.
L’any 1375, passà a formar part de la baronia de Llagostera fins a la fi del segle XVIII.
A finals del segle XIX el castell fou enderrocat.
