Enderrocat.
La primera referència d’aquest indret data de l’any 1152, quan Ramon Berenguer IV, comte de Barcelona, donava als homes de Tàrrega de tota la terra que ell posseïa a Vinaixa, “Olmels” surt com a afrontació.
L’any 1177, Guillem de Torroja donà els drets que tenia sobre el “castrum Omellis” i el seu terme a Jeroni d’Aguda.
L’any 1196, Ramon de Torroja, vidu de Gaia de Cervera, llegava aquest castell al seu fill Hug. Posteriorment aquest llegà el castell “d’Ulmellis” i el de l’Espluga de Francolí a la seva germana Eldiarda, casada amb Ramon de Palau; aquests el donaren el 1231 a llur fill Simó amb motiu del seu enllaç amb Gueraua d’Anglesola.
L’any 1245, Simó de Palau, vescomte de Bas i fill d’Eldiarda de Torroja, llegà aquest castell a l’abadessa del monestir de Santa Maria de Vallbona.
L’any 1261, Sibil•la, vescomtessa de Bas i filla de Simó, renuncià als drets que tenia en aquest castell en favor del cenobi, en aquesta època els castlans eren els Aguda.
L’any 1380, l’abadessa del monestir comprà la jurisdicció civil i criminal d’aquest lloc que pertanyia a la baronia de Vallbona.