Hadoop analiz platformu Cloudera CEO'su Mike Olson, olduğu gibi, hız ve karmaşıklığı içeren bazı önemli sınırlamalara sahip. Ancak, kendi liderleri de dahil olmak üzere endüstri liderleri, bu araştırma aracının önümüzdeki yıllarda temel yollarla gelişeceğinden emin olarak bunu değiştirmek için çalışıyorlar.
Geçen yılki Strata Konferansı'nda Olson, bir seyirciden bugün yaratıldıysa, Hadoop'un nasıl farklı bir şekilde tasarlanacağını hayal etmesini istedi, bazı spesifik değişikliklerin eğitim, enerji ve tarım gibi alanlarda araştırma yapmak için yeni girişler açabileceğini öne sürdü. Kozmolog ve bilimsel yazar Carl Sagan'dan bahseden Olson, daha büyük bir kitle için üst düzey verilerin ayrılmasının önemini vurguladı.
Olson, "Sanırım iş ve toplum için önemli olan önemli keşiflerin kenarında duruyoruz." Dedi.
Bir örnek, İsviçre'deki Büyük Hadron Çarpıştırıcısındaki bilimsel profesyonellerin çalışmaları ile mümkün kılınan bilimsel keşiftir. Olson'a göre, madde ve enerjinin kilit yönlerini ortaya çıkaran havza Higgs-Boson keşfi gibi önemli ilerlemelere yol açan 37 terabaytlık verilerin günlük değerlendirmesi. Olson, Hadoop'un tek bir depoda çok büyük miktarda veri yakalayarak bu temel araştırma projelerine yardımcı olmasına yardımcı olduğunu, ancak bu verilerle gerçek zamanlı olarak etkileşimin zor olduğunu ekledi.
Hadoop ve benzeri teknolojilerin sağlık gibi kilit alanlarda bilim insanlarına yardımcı olma yollarını anlatan Olson ayrıca, şirketin iki yıldır üzerinde çalıştığı bir şey olan Impala projesini iki çeyrek beta testiyle istemciler. Impala projesi, Olson'ın Apado lisanslı Hadoop ile "gerçek zamanlı sorgu motoru" olarak çalışan "% 100 açık kaynaklı" bir teknoloji olduğunu söyledi. Olson, bunun, kullanıcıların bir soru sorabileceği, bir yanıt alabileceği ve büyük veri kümelerini etkili bir şekilde kullanmak için yeni bir soru formüle edebileceği "düşünce sorgularının hızı" olarak adlandırdığı şeye izin verdiğini söyledi.
"Bu size verilerinize ulaşmanız için yeni bir yol sunuyor, " dedi Olson, bu tür ilerlemenin ABD ve yurtdışındaki büyük sorunları çözmek için nasıl ek fırsatlar yaratabileceğini özetliyor.
