La primera referència documental d’aquest castell data de l’any 988, en relació amb una revolta que hi hagué contra el comte Oliba Cabreta entre els anys 979 i 981. Sembla que Goldregot lliurà aquest castell als enemics del comte i una vegada va estar apaivagada la revolta, el comte va retirar certs béns a Goldregot, entre ells un alou que va ser donat al monestir de santa Maria de Serrateix.
Entre els anys 1068 i 1095, Ramon Bernat de Castelladral jurà fidelitat al comte de Cerdanya per aquest castell.
En el fogatjament de 1365-1370 comptava amb 31 focs i pertanyia al cavaller Rajadell, en el de 1381 només tenia 20 focs.
A la primera meitat del segle XVII, Josep de Rajadell i la seva dona Maria, vengueren a carta de gràcia la baronia de Viver, per 9.500 lliures, a Joan de Martín, senyor de Balsareny. Quan aquest morí, heretà la seva dona Mariana, l’any 1672 passà la senyoria a subhasta que fou adquirida pel doctor Francesc Jordana per 100 doblers d’or.
Al segle XVIII, eren senyors d’aquesta baronia la família Gras de Barbens.
L’any 1961, el jaciment d’aquest castell fou excavat sota la direcció del doctor Albert del Castillo; van aparèixer diverses sepultures.
