Facebooks framgångssaga är nästan var mans kännedom vid det här laget. Men det sociala nätverkets enorma tillväxttakt har även sina baksidor, exempelvis hur man tacklar en aktivitet på 2,7 miljarder ”likes”, 300 miljoner nya foton och 500 terabyte ny lagrad data – varje dag.
Facebook presenterade en hel del spännande information under ett mindre pressevent på sitt högkvarter i Palo Alto, Kalifornien, som gör det lättare att uppskatta och förstå vad som krävs för att driva världens största sociala nätverk. Företaget avslöjade att Facebook varje dag behandlar inte mindre än 2,7 miljarder ”likes”, 300 miljoner fotouppladdningar och 2,5 miljarder delningar av länkar. Något som genererar ofattbara 500 terabyte ny data varje dag. Vilket kan sättas i relation till världens rymligaste konsumenthårddisk på 4 terabyte.
För att hantera den enorma mängd data som Facebook plockar upp varje dag har företaget byggt enorma lagringskluster och påstår sig idag sitta på världens största Hadoop-system där varje enskilt Hadoop-kluster (HDFS) rymmer över 100 petabyte av data – motsvarande 25 600 hårddiskar på 4 terabyte vardera.
Facebook vill lagra data i Sverige
I dag samlar Facebook all sin data i ett ensamt datacenter, med redundanta servrar för säkerhet, och när kapaciteten tryter flyttar man hela rasket till en ny plats där kapaciteten uppgraderats. Ett långt ifrån optimalt upplägg som företaget arbetar på att förbättra med sitt ”Project Prism” där man fysiskt kan dela upp den lagrade datan över flera datacenter men samtidigt kan övervaka sin data i en enda stor helhet. Project Prism kommer att låta Facebook dela upp sin data i datacenter placerade primärt i USA men faktiskt även i Sverige.
De tusentals petabyte av data som Facebooks användare totalt genererat används av företaget bland annat för att optimera annonskampanjer för sina kunder och även utveckla egna nya tjänster och produkter där man ser behov.
Källa: SlashGear
Förstå att det är fler än en som inte arbetar med annat än att fysiskt montera hårddiskar åt facebook hela dagarna 😀 herp
[quote name=”Schwoopy von Loopy”]Förstå att det är fler än en som inte arbetar med annat än att fysiskt montera hårddiskar åt facebook hela dagarna 😀 herp[/quote]
Jag hoppas innerligt att det är minst två personer som samarbetar när de monterar upp hårddiskchassina i racken. Det lär ju väga lite grann så att säga.
Stod det inget om hur många HDFS kluster de hade. Hade varit intressant men kan tänka mig att det ständigt ökar. Frågan är ju dock hur länge man sparar data, för de kan ju inte spara ner data hur länge som helst, kan ju knappast vara hållbart.
Facebook far val sina rack fardigmonterade (plugga bara in konsoll, fiber och strom) som de andra stora aktorerna sa det ar nog inte mycket som kravs dar. Underhall, daremot…
Undrar om dom kör RAID 0 för att få snabbare dataöverföring? 😆
[quote name=”Sebbe”]Undrar om dom kör RAID 0 för att få snabbare dataöverföring? :lol:[/quote]
Det gor man sakert. Redundancy ligger inte pa HW-niva.
underhåll?
fniss fick en syn framför mig hur några springer runt i clowndräkt och gör roliga konster för att underhålla alla hårddiskarna 😛 8) 😉 🙂 😆 😀
[quote name=”bbatman”]underhåll?
fniss fick en syn framför mig hur några springer runt i clowndräkt och gör roliga konster för att underhålla alla hårddiskarna[/quote]
Ja, de behovs ju bytas ut nar de gar sonder.