Karena itu, kata CEO Cloudera Mike Olson, platform analitik Hadoop memiliki beberapa batasan signifikan yang melibatkan kecepatan dan kompleksitas. Namun, para pemimpin industri - termasuk mereka yang ada di perusahaannya sendiri - berupaya mengubah hal itu, yakin bahwa alat penelitian ini akan berkembang secara mendasar di tahun-tahun mendatang.
Pada Konferensi Strata tahun lalu, Olson meminta audiens untuk membayangkan bagaimana, jika dibuat hari ini, Hadoop akan dirancang secara berbeda, menyatakan bahwa beberapa perubahan spesifik dapat membuka gateway baru untuk penelitian di bidang-bidang seperti pendidikan, energi dan pertanian. Mengutip kosmolog dan penulis ilmiah Carl Sagan, Olson menekankan pentingnya memecah data tingkat tinggi untuk khalayak yang lebih besar.
"Saya pikir kita siap di tepi penemuan besar yang penting bagi bisnis dan masyarakat, " kata Olson.
Salah satu contoh, katanya, adalah penemuan ilmiah yang dimungkinkan oleh karya profesional ilmiah di Large Hadron Collider di Swiss. Menurut Olson, ini adalah evaluasi harian dari 37 terabyte data yang telah menyebabkan kemajuan kunci seperti penemuan DAS Higgs-Boson, yang mengungkapkan aspek-aspek kunci dari materi dan energi. Olson menambahkan bahwa Hadoop membantu untuk membantu dalam proyek penelitian mendasar ini dengan menangkap sejumlah besar data dalam satu repositori, tetapi sulit untuk berinteraksi dengan data tersebut secara real time.
Menguraikan cara-cara yang Hadoop dan teknologi serupa dapat membantu para ilmuwan di bidang-bidang utama, seperti perawatan kesehatan, Olson juga mengumumkan proyek Impala, sesuatu yang perusahaannya telah kerjakan selama dua tahun, dengan dua perempat pengujian beta berkoordinasi dengan perusahaan besar. klien. Proyek Impala, kata Olson, adalah teknologi "100% open source" dengan lisensi Apache yang bekerja dengan Hadoop sebagai "mesin permintaan waktu nyata". Ini, kata Olson, memungkinkan apa yang ia sebut "pertanyaan kecepatan", di mana pengguna dapat mengajukan pertanyaan, mendapatkan jawaban, dan merumuskan pertanyaan baru untuk secara efektif menggunakan kelompok data utama.
"Ini memberi Anda cara baru untuk mendapatkan data Anda, " kata Olson, menguraikan bagaimana kemajuan semacam ini dapat membuka peluang tambahan untuk memecahkan masalah besar di AS dan luar negeri.
