Nazwa miejscowości wskazuje najprawdopodobniej na zamieszkiwanie tego terenu przez dawnych budników, czyli osoby mieszkające w półziemiankach lub szałasach i trudniące się karczowaniem lasu, wypałem węgla drzewnego i produkcją smoły.

W Budach znajduje się wyjątkowy drewniany krzyż przydrożny z II pół. XIX w. Oprócz postaci ukrzyżowanego Chrystusa umieszczono na nim rzeźbę anioła, symbole Męki Pańskiej i Mszy św. W II pół. XVIII w. blisko Bud stała figura św. Rocha -patrona aptekarzy, lekarzy, więźniów, opiekuna zwierząt domowych. Gdy w 1773 r. okolice Koźmina dotknięte zostały pomorem bydła, mieszkańcy miasta i pobliskich wiosek pielgrzymowali do tego miejsca prosząc świętego o ochronę przed zarazą.

Funkcję sołtysa pełni od 10 lutego 2015r. Patryca Droszcz.