Ruïnes.
La primera referència d’aquest indret data de l’any 1017, surt esmentat amb el nom de “Jafar”.
Hom pensa que aquest castell és d’època tardana i que potser podia ésser més aviat una casa forta.
Fins a la segona meitat del segle XIII no es documenta cap castell, tot i que la potestat d’aquest lloc pertanyia al monestir de Sant Miquel de Cruïlles.
L’any 1279 n’era senyor Artal de Jafre que signava l’acta de fundació d’una capellania a l’església canonical de les Olives pel vescomte Dalmau de Rocaberti.
L’any 1418, el vescomte Dalmau de Rocaberti, nebot de la comtessa Joana, heretà la baronia de Verges, en ella s’incloïa el castell de Jafre.
L’any 1462, els pagesos degollaren a Jafre 30 francesos.
Al segle XVII, “Iaffre” pertanyia al rei.