Den viktigste bygningen på setra, er huset der folkene bor. Dette kalles litt forskjellige ting ettersom hvor i landet setra ligger. Eksempler på slike navn er bu, sel, størhus eller seterstue. Her bor budeia og her foregår mye av arbeidet. Tradisjonelt hadde selet et oppholdsrom med ei eller flere senger og et ildsted for å koke mat og brunost. I tillegg hadde huset ei mjølkebu for lagring av mjølkeprodukt, butter og annen redskap. Noen ganger var selet bygd sammen med fjøset. I dag er dette huset først og fremst en bolig for dem som eier og jobber på setra. Selet kan være gammelt, men det kan også være en ny bygning.