Nowa wersja, ogłoszona podczas dorocznej konferencji deweloperskiej Yahoo!, wprowadza integrację z protokołem Kerberos, odpowiedzialnym za autoryzację i bezpieczeństwo przy wymianie danych.

Firma z Santa Clara pracuje również nad integracją Hadoopa z Oozie, odpowiedzialnym za zarządzanie i przepływ danych. Gigant stwierdził, że dostępność tych funkcji pozwoli na szerokie wykorzystywanie tego rozproszonego systemu plików przez firmy, które potrzebują metod przetwarzania nieustrukturyzowanych danych, generowanych przez społecznościowe media.

Blake Irving, dyrektor ds. produktów w Yahoo, powiedział podczas wystąpienia, że Hadoop wykorzystywany jest do procesu gromadzenia 120 TB informacji każdego dnia. W ich skład wchodzi m.in. pięć miliardów e-maili każdego dnia dla pół miliarda użytkowników – a większość z tego stanowi spam.

Chociaż Yahoo nadal jest główną firmą napędzającą rozwój Hadoopa, to Google, Facebook, LinkedIn oraz Amazon wykazując coraz większe zainteresowanie tym rozproszonym systemem plików. Budzi on również coraz większe zainteresowanie programistów. W tym roku na Hadoop Summit przybyło 1000 osób, w porównaniu do 700 w zeszłym roku.

Melanie Posey, dyrektor badawczy w IDC, powiedziała że Hadoopem powinny zainteresować się firmy, które szukają sposobów na efektywniejsze wykorzystanie rosnącej ilości danych. „Apache Hadoop jest efektywnym rozwiązaniem dla przetwarzania danych na dużą skalę. Dojrzał i stał się gotowym rozwiązaniem typu cloud computing dla przedsiębiorstw. Teraz organizacje mogą zwiększyć inwestycje w Hadoop i rozpocząć jego wdrażanie w systemach produkcyjnych bez potrzeby przeprowadzania kosztownych, wewnętrznych badań” – powiedziała Posey.

W wywiadzie dla InternetNews.com, Mike McGuire, analityk Gartnera, stwierdził że Yahoo! angażuje się w inwestycje długoterminowe. „Kiedy patrzy się na to jakie inwestuje Yahoo!, również pod kątem Open Source, widać wiele rzeczy, które nie zwrócą się tak szybko. Jeśli jednak spojrzeć na to, co obecnie pokazuje Yahoo!, i gdzie może to prowadzić, wygląda to bardzo imponująco” – stwiedził McGuire.

Najnowsze wersję Hadoop i Oozie dostępne są poprzez Yahoo Developer Network.

Źródło: Developer.com