Hem Personliga finanser Hadoop och Hive dummies

Hadoop och Hive dummies

Video: Big Data analysis Hadoop with Mapreduce, HIVE, PIG and Spark class 10 2024

Video: Big Data analysis Hadoop with Mapreduce, HIVE, PIG and Spark class 10 2024
Anonim

För att göra en lång historia kort, ger Hive Hadoop en bro till RDBMS världen och tillhandahåller en SQL-dialekt som kallas Hive Query Language (HiveQL), som kan användas för att utföra SQL-liknande uppgifter. Det är de stora nyheterna, men det finns mer att Hive än vad som stämmer överens med ögat, som de säger, eller fler tillämpningar av den här nya tekniken än vad du kan presentera i en vanlig hissstigning.

Till exempel möjliggör Hive det koncept som kallas Enterprise Data Warehouse (EDW) augmentation, ett ledande användarfall för Apache Hadoop, där datalager är uppbyggda som RDBMSs byggda speciellt för dataanalys och rapportering.

tillägg till företaget och att den kan augment och komplettera befintliga EDWs. Hive, HBase och Sqoop möjliggör EDW augmentation. Nästan förknippad med RDBMS / EDW-tekniken är extrakt, transform och laddningsteknik (ETL). För att förstå vad ETL gör, hjälper det att veta att i många användningsfall inte data kan laddas omedelbart i relationsdatabasen - det måste först utvinnas från sin ursprungliga källa, omvandlas till ett lämpligt format och laddas sedan in i RDBMS eller EDW.

Ett företag eller en organisation kan exempelvis extrahera ostrukturerad textdata från ett internetforum, omvandla data till ett strukturerat format som är både värdefullt och användbart och sedan ladda de strukturerade data i sin EDW.

Du kan se att Hive är ett kraftfullt ETL-verktyg i sin egen rätt, tillsammans med den stora aktören i detta rike: Apache Pig. Igen kan användarna försöka ställa in Hive and Pig som

de nya ETL-verktygen för datacentret. (Låt dem försöka.)

Som med debatten om EDW kontra Apache Hadoop är dessa Apache Hadoop-teknologier inte direkta ersättning s för befintliga ETL-verktyg, utan istället är kraftfulla nya ETL-verktyg att vara används när det är lämpligt. Sist men inte minst, Apache Hive ger dig kraftfulla analysverktyg, allt inom ramen för HiveQL. Dessa verktyg bör se och känna sig välkända för IT-proffs som förstår hur man använder SQL.

Hadoop och Hive dummies

Redaktörens val

Hur man lägger till text i en sätter () Funktion i C Programmering

Hur man lägger till text i en sätter () Funktion i C Programmering

När du behöver visa en annan textrad, använd C-programmeringsfärdigheterna för att skapa en annan puts () -funktion i källkoden, som visas i Visa två textlinjer. VISA TILL TEXTFINER # inkludera int main () {sätter ("Hickory, Dickory, Dock,"); sätter ("musen sprang klockan."); returnera (0);} Den andra ...

Förklarar variabler i C-dummies

Förklarar variabler i C-dummies

Variabler är det som gör dina program zooma. Programmering kan bara inte bli gjort utan dem. Så om du inte har introducerats till variabler än, här går du. Valerie Variable är en numerisk variabel. Hon älskar att hålla nummer - vilket nummer som helst; det spelar ingen roll. När hon ser ett lika tecken tar hon ett värde och ...

Redaktörens val

Gör rädsla för din vän - dummies

Gör rädsla för din vän - dummies

Rädsla är lika verklig som mod. Även om värdet av rädsla inte är lika uppenbart som modets värde, har det dess fördelar. Rädsla är din instinkt som säger att du är obehaglig - även om situationen inte kommer att skada dig. Alla har haft den känslan när man hellre drar locket ...

Hur man ökar din självmedvetenhet - dummies

Hur man ökar din självmedvetenhet - dummies

Du kommer att vara med dig själv under en livstid. Ingenting kommer att förändra det faktum. Att lära känna, som att lyssna på och uppskatta själv är avgörande för din sanity. Kanske kommer du till att älska, acceptera och omfamna alla du är, är svår för dig att föreställa dig just nu, men du kan göra ...

Hur man ökar din mentala flexibilitet - dummies

Hur man ökar din mentala flexibilitet - dummies

ÄR flexibel i arbete och relationer är ett tecken på en högpresterande. Medan perfektionister är styva och obehagliga i sitt arbete och hur de interagerar med andra, är högpresterande mer öppna och tillmötesgående. Att vara mer flexibel på jobbet gav Ralph aldrig förslag under brainstorming vid gruppmöten. Han kände att hans lag ...

Redaktörens val

Nätverksadministration: Linux-installation och virtuella konsoler - dummies

Nätverksadministration: Linux-installation och virtuella konsoler - dummies

Linux är i sig ett kommandoradsorienterat operativsystem. Grafiska användargränssnitt - inklusive installationsprogrammets GUI - tillhandahålls av en valfri komponent som heter X Window System. Men medan du arbetar med det grafiska användargränssnittet för installationsprogrammet, håller Linux flera ytterligare kommandorads-konsoler öppna. Normalt behöver du inte ...

Nätverksadministration: Linux-loggning, logg och systemavstängning - dummies

Nätverksadministration: Linux-loggning, logg och systemavstängning - dummies

Alla användare som åtkomst ett Linux-system, lokalt eller över ett nätverk, måste verifieras av ett giltigt användarkonto på systemet. I det följande får du veta hur du loggar in och ut på ett Linux-system och hur du stänger av systemet. Logga in När Linux startar upp visas det ...

Nätverksadministration: Licensserver - Dummies

Nätverksadministration: Licensserver - Dummies

I vissa program kan du köpa nätverkslicenser som gör att du kan installera programvaran på många datorer som du vill, men reglera antalet personer som kan använda programvaran vid en viss tidpunkt. För att styra hur många som använder programvaran, är en särskild licensserver inrättad. När en användare börjar ...