De heren van Ghoor waren de stichters van dit kasteel. Zij hadden ook een bezit in Haelen, om verwarring te voorkomen zijn ze het kasteel in Haelen Aldenghoor (ald=oud) en het nieuwe kasteel Neyenghoor (neyen=nieuw) gaan noemen. In de 18de eeuw werd het kasteel afgebroken, waarschijnlijk door een gebrek aan geld.
De Boerderij, een voormalig landgoed, heeft de tijd des tands goed doorstaan en geeft een indruk van de grandeur van het afgebroken kasteel.