Skolemuseet, eller Riibergfondet, holder til i et av disse små husene. Skolehuset ble bygget i 1774 for midler fra en stiftelse opprettet av Marcille Riiberg i 1755. Skolen var både en barneskole for barna i området og en gratis toårig opplæringsskole for to ungdommer om gangen. Deretter ble de sendt ut for å arbeide som ambulerende lærere på landsbygda. Slik fortsatte det i mer enn 40 år, inntil lærerutdanningen av økonomiske grunner ble nedlagt i 1820. Folkeskolen ble liggende her frem til begynnelsen av 1900-tallet. Skolehuset ble restaurert og gjort om til museum på initiativ fra ansatte ved Jelsa skole.