Takeaway:
Ang platform ng Hadoop analytics ay may ilang mga makabuluhang limitasyon na kinasasangkutan ng bilis at pagiging kumplikado, ngunit ang mga pinuno ng industriya ay nagtatrabaho upang baguhin iyon.
Tulad nito, sabi ng Cloudera CEO Mike Olson, ang platform ng analytics ng Hadoop ay may ilang mga makabuluhang limitasyon na kinasasangkutan ng bilis at pagiging kumplikado. Gayunpaman, ang mga pinuno ng industriya - kabilang ang mga nasa kanyang sariling kompanya - ay nagtatrabaho upang baguhin iyon, tiwala na ang tool na ito ng pananaliksik ay magbabago sa mga pangunahing paraan sa mga darating na taon.Sa Strata Conference ng nakaraang taon, hiniling ni Olson sa isang tagapakinig na isipin kung paano, kung nilikha ito ngayon, ang Hadoop ay magkakaiba ay idinisenyo, na nagpapalagay na ang ilang mga tiyak na pagbabago ay maaaring magbukas ng mga bagong gateway upang magsaliksik sa larangan tulad ng edukasyon, enerhiya at agrikultura. Nabanggit ang kosmologist at may akdang pang-agham na si Carl Sagan, binigyang diin ni Olson ang kahalagahan ng pagbagsak ng data ng mataas na antas para sa isang mas malaking madla.
"Sa palagay ko ay nakatuon kami sa gilid ng mga pangunahing tuklas na mahalaga sa negosyo at sa lipunan," sabi ni Olson.
Isang halimbawa, naitala niya, ay ang pang-agham na pagtuklas na posible sa pamamagitan ng gawa ng mga propesyonal na pang-agham sa Malaki Hadron Collider sa Switzerland. Ayon kay Olson, ang pang-araw-araw na pagsusuri ng 37 terabytes ng data na humantong sa mga pangunahing pagsulong tulad ng natuklasan na tubig na Higgs-Boson, na nagpahayag ng mga pangunahing aspeto ng bagay at enerhiya. Idinagdag ni Olson na tumutulong si Hadoop upang tulungan ang mga pangunahing proyektong pananaliksik sa pamamagitan ng pagkuha ng isang napakalaking halaga ng data sa isang solong imbakan, ngunit mahirap na makisalamuha ang data na iyon sa real time.
Ang pagpapalawak ng mga paraan na ang Hadoop at mga katulad na teknolohiya ay maaaring makatulong sa mga siyentipiko sa mga pangunahing lugar, tulad ng pangangalaga sa kalusugan, inihayag din ni Olson ang proyektong Impala, isang bagay na pinagtatrabahuhan ng kanyang kumpanya sa loob ng dalawang taon, na may dalawang quarter ng pagsubok sa beta sa koordinasyon sa pangunahing kliyente. Ang proyekto ng Impala, sinabi ni Olson, ay isang "100% open source" na teknolohiya na may Apache licensing na gumagana sa Hadoop bilang isang "real-time query na makina." Ito, sinabi ni Olson, pinapayagan ang tinatawag niyang "bilis ng mga query sa pag-iisip," kung saan maaaring magtanong ang mga gumagamit, makakuha ng tugon at magbalangkas ng isang bagong katanungan upang epektibong magamit ang mga pangunahing kumpol ng data.
"Nagbibigay ito sa iyo ng isang bagong paraan upang makarating sa iyong data," sabi ni Olson, na nagbabanggit kung paano ang uri ng pagsulong na ito ay maaaring magbukas ng karagdagang mga pagkakataon upang malutas ang mga pangunahing problema sa Estados Unidos at sa ibang bansa.