Súborový systém Btrfs mal ušetriť Facebooku miliardy dolárov

Značky: BtrfsLinuxFacebook

DSL.sk, 11.8.2025

Celá infraštruktúra spoločnosti Meta prevádzkujúcej okrem iného Facebook je postavená na súborovom systéme Btrfs a spoločnosť údajne ušetrila miliardy dolárov v nákladoch vďaka jeho vlastnostiam a robustnosti.

Vo verejnej diskusii to uviedol Josef Bacik, významný vývojár Btrfs a zároveň zamestnanec Meta. Na jeho vyjadrenie upozornil linuxový Phoronix.

Diskusia bola o inej téme, novom súborovom systéme Bcachefs, a Bacik túto svoju informáciu bližšie nevysvetlil.

Btrfs určený pre Linux začal vznikať v roku 2007 a oproti vtedajším súborovým systémom pre Linux podporuje pokročilé funkcie podobne ako súborový systém ZFS pôvodne vyvinutý pre Solaris.

Btrfs, B-tree file system, je totiž pokročilým súborovým systémom typu copy-on-write, teda systémom schopným uchovávať pri zmene dát aj ich pôvodnú podobu a zapisujúcim zmenenú podobu na novú pozíciu. Priamo sú samozrejme podporované snapshoty, okamžité klonovanie súborov a ďalej využívanie viacerých blokových zariadení, interný RAID úrovní 0, 1 a 10, viac zväzkov v jednom úložisku, transparentná kompresia, kontrola integrity uložených dát kontrolnými sumami a preverenie jej stavu, online defragmentácia, deduplikácia, podpora generovania a aplikovania rozdielových zmien medzi snapshotmi.

Btrfs sa presadzoval pomerne pomaly, v súčasnosti ho už ale niektoré distribúcie používajú ako štandardný súborový systém. Btrfs má už ale konkurenta s podobnými funkčnosťami, keď pre Linux je už k dispozícii aj kvalitná implementácia ZFS.


Najnovšie články:



Diskusia:

no neviem Od: FAT12 | Pridané: 11.8.2025 9:44 Miliardy? To čo to zapisovali na papier? Odpovedať Známka: 1.2 Hodnotiť:

Re: no neviem Od: Sporinko | Pridané: 11.8.2025 9:58 Poziadali diskutujucich na dsl.sk aby im spravili dokonale presny odhad a syntaxterrorXXX napisal "priekazne miliardy". No a oni uz urobili len copy-and-write Odpovedať Známka: 8.8 Hodnotiť:

Re: no neviem Od: qweewq | Pridané: 11.8.2025 9:58 nie, nemuseli platiť licencie na Windows Server Odpovedať Známka: 9.1 Hodnotiť:

Re: no neviem Od: FAT12 | Pridané: 11.8.2025 10:35 Dobre, porovnajme ho s ext4 napríklad. Odpovedať Známka: -5.0 Hodnotiť:

Re: no neviem Od: jozo34563456 | Pridané: 11.8.2025 11:23 ext4 nepodporuje snapshoty, deduplikaciu a reflink, nepodporuje raid Odpovedať Známka: 10.0 Hodnotiť:

Re: no neviem Od: Ondrej Masár | Pridané: 11.8.2025 11:47 Sú tie "snapshoty" také nevyhnutné pre nejaký facebook? Odpovedať Známka: -6.7 Hodnotiť:

Re: no neviem Od: no jasne | Pridané: 11.8.2025 12:27 Skôr deduplikácia im veľa ušetrila. Všetky tie rovnaké, opakujúce sračky zmestili na jeden starý disk. Odpovedať Známka: 10.0 Hodnotiť:

Re: no neviem Od: dufus | Pridané: 12.8.2025 13:45 Jožko Báčik z Báčoviec ti nie je dostatočne dôveryhodný? Odpovedať Známka: 10.0 Hodnotiť:

bez suvislosti Od reg.: roob_ | Pridané: 11.8.2025 9:53 bez konkretneho vysvetlenia je tato informacia nanic. Btrfs napr. podporuje deduplikaciu a teda za istych okolnosti setri miesto na disku. FB ma tych diskov celkom dost, takze sa moze usetrit mega miesta, co premenene na cenu diskov moze byt zaujimava suma. Nebudu to ale miliardy, takze si myslim, ze to bol klasicky vyrok "ja zjem 200 hotdogov" cim sa mysli, ze "vela" a nie presne 200. Odpovedať Známka: 7.6 Hodnotiť:

Re: bez suvislosti Od: jozofgh356346y245 | Pridané: 11.8.2025 10:20 Btrfs pokial viem podporuje len offline deduplikaciu. To podporuje aj napr XFS. Podporuje aj transparentnu ZSTD kompresiu ale pocitam ze tam ukladaju foto a videjka takze to im je tiez zbytocne Odpovedať Známka: 10.0 Hodnotiť:

No určite Od: čevapčiči | Pridané: 11.8.2025 14:41 Jeden hovorí, že podporuje online, druhý len offline deduplikáciu. Nakoniec to bude tak, že rôzne featury sú podporované iba pri splne mesiaca. Že kvalitná implementácia OpenZFS v Linuxe? Keď sa zadarí, tak aj trikrát denne dostanem notifikáciu o výpadku z vpsFree a dôvod hádajte (áno, OpenZFS bug). Odpovedať Známka: -2.0 Hodnotiť:

Re: No určite Od: jozo34563456 | Pridané: 11.8.2025 14:48 zfs ti pri online deduplikacii zozerie vsetku pamat a spolujazdcov v aute Odpovedať Známka: 10.0 Hodnotiť:

ja viem vsetko uz vcera Od: Mladý komsomolec | Pridané: 11.8.2025 22:27 Meta ušetrila miliardy dolárov vďaka nasadeniu súborového systému Btrfs naprieč svojou infraštruktúrou vrátane Facebooku. Btrfs, vyvíjaný od roku 2007, ponúka funkcie ako copy-on-write, okamžité snapshoty, transparentnú kompresiu, deduplikáciu, kontrolu integrity dát a softvérový RAID. Transparentná kompresia a deduplikácia môžu znížiť objem uložených dát o 20–40 %, čo pri stovkách exabajtov znamená úsporu v stovkách miliónov USD ročne len na hardvéri, energiách a chladení. Snapshoty a copy-on-write skracujú migrácie a testovania z dní na hodiny, čím šetria čas aj kapacitu serverov. Kontrolné súčty minimalizujú riziko drahých incidentov, a zabudovaný RAID umožňuje využívať lacnejší commodity hardware namiesto drahých enterprise úložísk. Podľa odhadov môže kombinovaný efekt týchto funkcií prinášať Mete viac než 1,5 miliardy USD úspor ročne a v horizonte piatich rokov prekročiť 7 miliárd USD. Odpovedať Známka: 10.0 Hodnotiť:

raid 5/6? Od: jakojako | Pridané: 12.8.2025 8:39 akoze doverovat fs, ktory roky nedokaze poriadne implementovat RAID 5/RAID 6. ale na tie fb vyplachy to asi fakt musi stacit. Odpovedať Známka: -10.0 Hodnotiť:

Pridať komentár