Dobrý den, odpověď najdete v Zákoně o vlastnictví bytů, konkrétně v §9, odst.9:
(9) Pokud se nesejde shromáždění k volbě orgánů společenství nebo nejsou-li tyto orgány zvoleny, plní funkci orgánů společenství vlastník, jehož spoluvlastnický podíl na společných částech domu činí nejméně jednu polovinu, jinak vlastníci jednotek, kteří se stali členy společenství dnem jeho vzniku.

ve vašem případě tedy tvoří výbor(možná o tom ani neví) ti vlastnici, kteří se stali členy SVJ dnem jeho vzniku. To můžete zjistit na kastru nemovitostí, výcházejte pak z definec v odst.3:
(3) Společenství vzniká v domě s nejméně pěti jednotkami, z nichž alespoň tři jsou ve vlastnictví tří různých vlastníků, a to dnem doručení listiny s doložkou o vyznačení vkladu do katastru nemovitostí nebo jiné listiny, kterou příslušný státní orgán osvědčuje vlastnické vztahy k jednotce, poslednímu z těchto vlastníků. Příslušný katastrální úřad vyrozumí ostatní vlastníky jednotek o provedení vkladu vlastnictví jednotky do katastru nemovitostí. Další osoby, které nabyly vlastnictví k jednotce jiným způsobem než smlouvou, jsou povinny o tom uvědomit původního vlastníka budovy.

Tyto osoby jsou tedy výborem a nesou odpovědnosti za škody případně vzniklé jejich nečinností, tzv.obecná odpovědnost za škodu definovaná v Obč.zákoníku.