Desaparegut.
L’any 1066, Artau I, comte de Pallars Sobirà, definí a Ramon V, comte de Pallars Jussà, el castell de “Tornastort”.
En la revolta nobiliària contra el rei Pere “el Gran”, el vescomte Ramon I de Vilamur milità al costat dels comtes de Foix i de Pallars i del vescomte de Cardona; vençut l’any 1280 a Balaguer, va estar reclòs a Lleida i va tindre que lliurar la potestat del castells de Vilamur, Rubió, Embonui, Montenartró i Tornafort, posteriorment li foren retornats.
L’any 1283, el vescomte Ramon I de Vilamur va prometre al rei ajut contra les forces del rei francès, posteriorment per la seva col•laboració fou nomenat veguer del Pallars i la Ribagorça l’any 1297.
En el fogatjament de 1381 comptava amb cinc focs.
L’any 1381, els Cardona adquiriren el vescomtat de Vilamur per donació del seu oncle, Ramon I d’Anglesola.
Per enllaç matrimonial a finals del segle XVII passà als ducs de Medinaceli.