Eind jaren 60 was er ’n grootgolfers vriendenclubje die af en toe naar de midgetgolfbaan in Soestduinen trokken om daar ’n rondje te spelen. Ook bezochten zij samen andere midgetgolfbanen en speelden wedstrijdjes. Zo kwamen zij tot de idee zich te verenigen en kwam het in 1970 tot de oprichting van de “Duinholers” met als thuisbasis Soestduinen.
In 1990 kocht ‘n projectontwikkelaar het terrein van Het Soester Natuurbad, waar de midgetgolfbaan onderdeel van was, van de Gemeente Soest op en de Duinholers werden thuisloos.
Gedurende 3 jaar vonden zij onderdak bij zusterverenigingen in Lexmond en Bilthoven.
In 1993 kwam toestemming van de gemeente Baarn voor aanleg van een Midgetgolfbaan naast Bosbad de Vuursche en in 1994 was de feestelijke opening.
Deze midgetgolfbaan hoort nu tot de mooiste van Nederland.
Vrijwel onbekend is dat deze baan is goedgekeurd om ook Nederlandse Kampioenschappen op te spelen. Nog in 2010 hebben die hier plaatsgevonden.