À emporter:
La plate-forme d'analyse Hadoop présente des limitations importantes en termes de rapidité et de complexité, mais les leaders du secteur s'efforcent de changer cela.
Selon Mike Olson, PDG de Cloudera, la plate-forme d’analyse Hadoop présente des limites importantes en termes de rapidité et de complexité. Cependant, les chefs de file de l'industrie, y compris ceux de sa propre entreprise, s'efforcent de changer cette situation, convaincus que cet outil de recherche évoluera de manière fondamentale dans les années à venir.Lors de la conférence Strata de l’année dernière, Olson avait demandé à son auditoire d’imaginer comment, s’il était créé aujourd’hui, Hadoop serait conçu différemment, certains changements spécifiques pouvant ouvrir de nouvelles portes à la recherche dans des domaines tels que l’éducation, l’énergie et l’agriculture. Citant le cosmologue et auteur scientifique Carl Sagan, Olson a insisté sur l’importance de la ventilation des données de haut niveau pour un public plus large.
"Je pense que nous sommes au bord de découvertes majeures qui importent tant pour les entreprises que pour la société", a déclaré Olson.
Un exemple, a-t-il noté, est la découverte scientifique rendue possible par les travaux de professionnels scientifiques du Grand collisionneur de hadrons en Suisse. Selon Olson, il s’agit de l’évaluation quotidienne de 37 téraoctets de données qui ont permis d’importants progrès, tels que la découverte du bassin versant de Higgs-Boson, qui a révélé des aspects essentiels de la matière et de l’énergie. Olson a ajouté qu'Hadoop contribuait à ces projets de recherche fondamentale en capturant une quantité énorme de données dans un seul référentiel, mais qu'il était difficile d'interagir avec ces données en temps réel.
Expliquant comment Hadoop et des technologies similaires peuvent aider les scientifiques dans des domaines clés, tels que les soins de santé, Olson a également annoncé le projet Impala, un projet sur lequel sa société travaille depuis deux ans. Deux trimestres de tests bêta en coordination avec les principaux les clients. Le projet Impala, a déclaré Olson, est une technologie "100% open source" avec licence Apache qui fonctionne avec Hadoop en tant que "moteur de requête en temps réel". Cela, dit Olson, permet ce qu'il appelle "la rapidité des questions", où les utilisateurs peuvent poser une question, obtenir une réponse et formuler une nouvelle question afin d'utiliser efficacement les principaux groupes de données.
"Cela vous donne un nouveau moyen d’obtenir vos données", a déclaré Olson, expliquant comment ce type de progrès pourrait ouvrir de nouvelles possibilités de résoudre des problèmes majeurs aux États-Unis et à l’étranger.