Saga Selsvallar og Golfklúbbsins Flúðir hófst þegar tannlæknir úr Garðabænum bauð Halldóri Guðnasyni, bónda á Efra-Seli, í golf á Keilisvelli vorið 1978. Þar með kviknaði áhugi Halldórs á íþróttinni og hann lét hugan reika um að hefja uppbyggingu golfvallar á Efra-Seli.
Árið 1984 hófst síðan ævintýrið fyrir alvöru þegar byrjað var á 6 holu golfvelli á svæði við Litlu-laxá þar sem nokkrar af golfbrautum vallarins liggja meðfram í dag. Þá komu til nokkrir áhugasamir aðilar sem tóku þátt í stofnun Golfklúbbs Flúða. Gífurleg sjálfboðavinna átti sér stað þar sem allir lögðust á eitt með að búa til aðlaðandi og skemmtilegan golfvöll. Allt umhverfið var snyrt og reglulegir vinnudagar voru fleiri en golfdagar í þá daga. Gróðursetning var eitt af aðal áhugamálum klúbbmeðlima og má glöggt merkja það í dag, tréin á Selsvelli eru eitt helsta einkenni vallarins. Fyrsti formaður GF var Karl Gunnlaugsson sem sat í stóli formanns frá stofnun klúbbins allt fram til aðalfundar árið 2011 eða í 25 ár.
Fyrsta sérhæfða golfvélin var keypt árið 1985 sama ár og klúbburinn var stofnaður.
Árið 1988 var golfskálinn vígður og frúin á bænum, Ásta Guðný, tók að sér veitingarekstur þar. Til að byrja með var boðið upp á kaffi, samlokur og kökur. Árið 1990 var byggt við skálann og hann stækkaður um meira en helming vegna aukinnar aðsóknar. Hafin var sala á léttu víni og bjór og boðið upp á heitan mat við hin ýmsu tilefni. Árið 1996 var bætt við pizzaofni og galdraðar fram ljúffengar pizzur.
Þegar kúabúskap var hætt á Efra-Seli árið 1997 var rætt um að bæta við 9 holum og þannig búa til 18 holu golfvöll. Framkvæmdir við stækkunina hófust um haustið 1999. Einnig var árið 1999 hafist handa við skipulagða skógrækt, bæði meðfram brautum sem og á opnum svæðum í nágrenni þeirra. Allt frá upphafi Selsvallar hefur skógrækt verið mikilvægur þáttur í uppbyggingu og hönnun vallarins.
Í desember 2000 hófst síðan nýr kafli í sögu GF og Selsvallar þegar hafist var handa við að breyta fjósbyggingunni á Efra-Seli í golfskála. Gamli skálinn var einfaldlega orðinn of lítill þar sem veitingareksturinn gat ekki annað stærri veislum með fullnægjandi hætti og einnig þurfti stærra og rúmbetra húsnæði þar sem mótahald verður meira umfangs með stærri golfvelli.
Nýr golfskáli var loks vígður þann 16. júní 2001. Þá var haldið golfmót með tilheyrandi veisluhöldum frá morgni til kvölds. Þann sama dag var Selsvöllur formlega vígður sem 18 holu völlur. Viðtökur kylfinga og annarra gesta hafa verið mjög jákvæðar og er það forsvarsaðilum mikil hvatning.
Vorið 2011 var handverksstofan Skógarsel opnuð við hliðina á golfskálanum þar sem finna má handverk af ýmsu tagi. Áhersla er lögð á efnivið úr íslenskum trjám og eru gripirnir bæði til sýnis og sölu. Árið 2013 var Skógarseli breytt í Bændamarkað sem opinn er yfir sumartímann þar sem hægt er að kaupa landbúnaðarafurðir beint frá bændum á Suðurlandi auk handverks og listmuna af ýmsu tagi.