Les primeres referències d’aquest castell daten de l’any 1362, encara que segurament és més antic. En aquest document esmenta els drets que tenien els homes d’aquest castell de pescar peixos i corall tant en el seu terme com en el del castell de Begur. En aquesta època els senyors eren els Cruïlles, que també ho eren del de Begur, Cruïlles i Peratallada.
