En son temps, La higuera avait une colonie médiévale avec des antécédents romains. Une tour a été construite qui est passée de propriétaires arabes à chrétiens et dont l'importance stratégique a augmenté jusqu'à ce que le Castillo de la Tercia soit construit avec la fonction principale de repérer d'autres bastions plus forts tels que ceux d'Arjona, Andújar et Jaén.