Facebook, büyük miktardaki veriyi ele almak için 'soğuk depolamayı' kullanmaya hazırlanıyor

Facebook, sosyal ağ kullanıcılarının her ay yüklediği 7 petabaytlık yeni fotoğrafla başa çıkma yollarını yeniden gözden geçiriyor. Fotoğrafların sayısı arttıkça, Facebook'un, altyapı mühendisliği başkan yardımcısına göre, hepsini depolamak için daha ucuz, daha az güç tüketen yollar bulması gerekiyor.

Kullanıcılar günde yaklaşık 300 milyon fotoğraf yüklediklerinde, özel günlerde Facebook'un Jay Parikh Çarşamba günü Amsterdam'daki Yapı Avrupa konferansına verdiği demeçte. "Cadılar Bayramı, yılın en büyük fotoğraf yükleme günlerinden biridir. Tek bir günde, muhtemelen 1 ve 2 milyar fotoğraf arasında bir yere ulaşacağız" dedi.

Cadılar Bayramı'nda çekilen fotoğraflar yakında ilgilerini kaybediyor Birkaç gün ya da hafta sonra onlara bakmadığı halde, "Kullanıcılarımızla yaptığımız sözleşmeler, erişilemediğinde verileri silemememizdir, onu korumak zorundayız" dedi. Bu, fotoğrafları bir çeşit "soğuk hava deposu" haline getirme fikrini doğurdu.

[Ekstra okuma: En iyi TV yayın hizmeti]

Bunu yapmak için, Facebook ile yeni bir veri merkezi oluşturmayı planlıyor. Farklı depolama türleri, sunucu donanımları ve ağ donanımları, daha az güç tüketen ve mevcut veri merkezlerinden daha az maliyet tüketen - sunucuların yanıt sürelerini değiştirmeden, "dedi.

Ama Facebook ne kadar verimli bir şekilde soğuk hava deposunu yapabilir? Veri merkezlerindeki maliyetler ve güç tüketimi azaldığında, bu genellikle erişim hızları pahasına gerçekleşir.

Bantlardaki verilerin saklanması, örneğin, güç tüketimini azaltır ancak veri erişimini ciddi şekilde yavaşlatır.

Amazon Web Services Bantın alternatifi olan Glacier bulut depolama servisi ile orta yol. Servis, nadiren erişilen veriler için optimize edildi ve birkaç saatin geri dönüş süreleri kabul edilebilir.

Parikh'a göre bu Facebook için çok yavaş. "Beş ya da on yıl önce erişebileceğiniz bir fotoğrafa sahip olamıyorum ve kullanıcı için bir afiş göstermem için bana:" Hey, neden 24 saat içinde tekrar denemiyorsunuz? " Göreceli olarak gerçek zamanlı olmak zorunda. ”Dedi.

Düşük güç ihtiyacı

Resim: Oregon'daki Veri Merkezi Bilgi Merkezi veri merkezi

Günümüzde kullanılan veri merkezlerinin çoğu, bir çok kullanım için optimize edildi. Büyük hesaplama gücüne ihtiyaç duyan görevlerle başa çıkma gücü. Parikh, Facebook'un “soğuk hava deposu” teknolojisinin diğer uçlarda olduğunu düşünüyor. “Çok fazla alana ihtiyaç duyuyorsunuz ama çok fazla güce ihtiyacınız yok” diye ekledi, veri merkezi hakkındaki herşeyin sorunu Facebook yüzünde ele almak için yeniden düşünülmesi gerektiğini de sözlerine ekledi.

Yüksek düzeyde Parikh, Facebook'un, altyapının içeriğindeki bir parçanın nasıl ve nerede saklanacağını anlayacak bir yazılım üzerinde çalışıyor. “Bu, verilerin kopyalarının zaman içinde hareket edeceği ve içerik çağına göre optimize edeceğimiz farklı altyapı parçalarını kullanacağı anlamına gelecektir.” Yazılım katmanındaki icatlardan bazıları Facebook'un hızlı bir şekilde yanıt vermesine izin verecek, ancak verileri daha etkin bir şekilde depolayabileceğini söyledi.

Soğuk depolamanın gelecek yıl veya iki yıl içinde Facebook'un altyapısının bir parçası olacağını söyledi. Facebook, açık kaynaklı yazılım işbirliği modelini veri merkezi donanımı dünyasına uygulamak için Facebook tarafından başlatılan bir girişim olan Açık Hesaplama Projesi ile ilgili olduğunu düşündüğü parçaları açıklamayı ve paylaşmayı planlıyor.