Tal com diu, Mike Olson, el director general de Cloudera, la plataforma d’analítica Hadoop té algunes limitacions importants que impliquen velocitat i complexitat. No obstant això, els líders del sector, inclosos els de la seva pròpia empresa, estan treballant per canviar-ho, confiant que aquesta eina de recerca evolucionarà de manera fonamental en els propers anys.
A la Conferència d’estrats de l’any passat, Olson va demanar a l’audiència que s’imaginés com, si es creés avui, Hadoop es dissenyaria d’una altra manera, plantejant que alguns canvis específics podrien obrir noves portes a la investigació en camps com l’educació, l’energia i l’agricultura. Olson, citat cosmòleg i autor científic, Olson va destacar la importància de desglossar dades d’alt nivell per a una audiència més gran.
"Crec que estem disposats a la vora de grans descobriments que són importants per als negocis i per a la societat", va dir Olson.
Un dels exemples, va assenyalar, és el descobriment científic que ha estat possible a través del treball de professionals científics al Gran Col·lisionador d’Hadrons de Suïssa. Segons Olson, és l’avaluació diària de 37 terabytes de dades que han suposat avenços claus com el descobriment de la conca de Higgs-Boson, que va revelar aspectes clau de la matèria i l’energia. Olson va afegir que Hadoop ajuda a assistir en aquests projectes fonamentals de recerca captant una quantitat enorme de dades en un únic dipòsit, però que és difícil interaccionar amb aquestes dades en temps real.
Tot explicant les maneres que Hadoop i tecnologies similars puguin ajudar els científics en àrees clau, com ara l’assistència sanitària, Olson també va anunciar el projecte Impala, cosa que la seva empresa treballa des de fa dos anys, amb dos quarts de proves beta en coordinació amb les principals. clients. El projecte Impala, va dir Olson, és una tecnologia "100% de codi obert" amb llicència Apache que funciona amb Hadoop com a "motor de consulta en temps real". Això, va dir Olson, permet allò que ell anomena "velocitat de les consultes de pensament", on els usuaris poden fer una pregunta, obtenir una resposta i formular una nova pregunta per utilitzar eficaçment grans clústers de dades.
"Dóna una nova manera de posar-te a les dades", va dir Olson, tot explicant com aquest tipus d'avanç podria obrir oportunitats addicionals per resoldre problemes importants als Estats Units i a l'estranger.
