Często zdarza się, że administratorzy i programiści korzystający z Apache Hive muszą rozwiązywać problemy związane z Metastore oraz uzyskiwać informacje na temat tabel Hive. W tym wpisie na blogu przedstawiam sposób rozwiązywania problemów związanych z Metastore oraz informacje na temat tego, gdzie można znaleźć informacje na temat tabel Hive. 1. Rozwiązywanie problemów z Hive Metastore […]
Pracując ze środowiskiem Hadoop na pewno masz do czynienia z takim wynalazkiem jak Kerberos. No chyba, że jest to środowisko testowe i Kerberosa po prostu tam nie ma. Zakładając, że każda szanująca się firma zadba o odpowiedni poziom bezpieczeństwa i Kerberos znajdzie się jako element stacku to na pewno zderzysz się z częścią problemów. Niektóre […]
Optymalizacja usługi Hadoopa jest jednym z kilku elementów, który wpływa na wydajność klastra. Podczas pracy z takim środowiskiem spotykamy wiele smaczków. Czasami trafiamy na ślady zmian wykonywanych przez kolegów, które zostały wprowadzone na chwilę. W rezultacie klaster może tracić na wydajności. Czasem nawet kilkanaście procent. Często zdarza się również tak, że wartości, które znajdziemy w […]
Co masz na myśli mówiąc „Mamy klaster Hadoopa”? Najczęściej w dużym uproszczeniu nazywamy tak jedną z dystrybucji Cloudera lub Hortonworks albo MapR. Jakie usługi potrzebujesz do uruchomienia klastra Hadoop? W poniższym wpisie opowiem Tobie o podstawowych i kluczowych usługach, których potrzebujesz do uruchomienia klastra Hadoop. Nagrałem również do tego podcast w oparciu o poniższy materiał. Jeżeli […]