Niet iedere heer woonde permanent in Mierlo
De eigenaar van de heerlijkheid was niet automatisch een permanente kasteelbewoner. Vroege heren verbleven vermoedelijk in grote hoeven of hadden elders belangrijke bestuurlijke functies. Ook later woonden verschillende heren een groot deel van hun tijd buiten Mierlo.
De Dickbier-familie is nauw verbonden met de bouw en vroege ontwikkeling van het kasteel. In de nieuwe tijd verbleven leden van Van Grevenbroeck en Van Scherpenzeel er geregeld. Hendrik Jan Francis van Scherpenzeel wordt genoemd als de laatste heer die nog regelmatig in het kasteel woonde.
Verpachting
Na de overdracht aan Jean Louis Carolus de Heusch en Ida Francisca van Scherpenzeel in 1765 bleef het echtpaar elders wonen en werd het Mierlose kasteel verpacht. Daarmee veranderde het complex steeds meer van residentiële machtsbasis in een bezit dat vooral economisch werd beheerd.
