Hem Personliga finanser Hur man får Apache Oozie Set Up i Hadoop - dummies

Hur man får Apache Oozie Set Up i Hadoop - dummies

Video: Så får du hunden att sluta skälla - Nyhetsmorgon (TV4) 2024

Video: Så får du hunden att sluta skälla - Nyhetsmorgon (TV4) 2024
Anonim

Apache Oozie ingår i varje större Hadoop-distribution, inklusive Apache Bigtop. I ditt Hadoop-kluster ska du installera Oozie-servern på en kantnod, där du också skulle köra andra klientapplikationer mot gruppens data, som visas.

Edge noder är avsedda att vara en gateway för det utvändiga nätverket till Hadoop-klustret. Detta gör dem ideala för dataöverföringsteknik (Flume, till exempel), men även klientapplikationer och annan applikationsinfrastruktur som Oozie. Oozie behöver inte en dedikerad server och kan enkelt samexistera med andra tjänster som är idealiska för kantnoder, som Pig and Hive.

När Oozie har implementerats är du redo att starta Oozie-servern. Oozies infrastruktur är installerad i katalogen $ OOZIE_HOME. Därifrån, kör oozie-start. sh kommandot för att starta servern. (Som du kan förvänta dig, innebär det att du stoppar servern med att skriva oozie-stop. Sh.) Du kan testa statusen för din Oozie-instans genom att köra kommandot

oozie admin-status

När du har installerat Oozie-servern och startat, du kan katalogisera och köra dina olika arbetsflöden, koordinator eller buntjobb. När du arbetar med dina jobb lagrar Oozie katalogdefinitionerna - data som beskriver alla Oozie-objekt (arbetsflöde, koordinator och buntjobb) - liksom deras tillstånd i en dedikerad databas.

Som standard är Oozie konfigurerad att använda den inbäddade Derby-databasen, men du kan använda MySQL, Oracle eller PostgreSQL, om du behöver.

Du har fyra alternativ för att interagera med Oozie-servern:

  • Java API: Det här alternativet är användbart i situationer där du har en egen schemaläggningskod i Java-program och du måste kontrollera exekveringen av din Oozie-arbetsflöden, koordinatorer eller buntar från din ansökan.

  • REST API: Igen fungerar det här alternativet bra i de fall där du vill använda din egen schemaläggningskod som grundval för dina Oozie-arbetsflöden, koordinatorer eller buntar eller om du vill bygga ditt eget gränssnitt eller utöka en befintlig för att administrera Oozie-servern.

  • Kommandoradsgränssnitt (CLI): Det är det traditionella Linux-kommandoradsgränssnittet för Oozie.

  • Oozie webbkonsol: Okej, kanske du inte kan göra mycket interaktion här, men Oozie Web Console ger dig en (skrivskyddad) bild av Oozie-serverns tillstånd, vilket är användbart för att övervaka dina Oozie jobb.

Hue, ett Hadoop administrationsgränssnitt, ger ett annat verktyg för att arbeta med Oozie.Oozies arbetsflöden, koordinatorer och buntar definieras alla med hjälp av XML, vilket kan vara tråkigt att redigera, speciellt för komplexa situationer. Hue ger ett GUI-designverktyg för att grafiskt bygga arbetsflöden och andra Oozie-objekt.

Oozie innehåller en inbäddad Tomcat-webbserver, som hanterar inmatning och utmatning.

Hur man får Apache Oozie Set Up i Hadoop - dummies

Redaktörens val

Jewish Funeral Traditions - dummies

Jewish Funeral Traditions - dummies

Judiska begravningar sker vanligen i en synagoge, begravningshem eller på en kyrkogård. Med tradition är judiska begravningar enkla (symboliserar tron ​​att människor är alla lika i döden), men de varierar mycket och har ingen uppsättning liturgi. Att skicka blommor till ett begravnings- eller sorgshem är starkt avskräckt i judendomen. Inte bara kommer ...

Identifiera komplicerade grävande dummies

Identifiera komplicerade grävande dummies

Komplicerat roende är det tekniska namnet som sorgproffs ger till en sorgprocess som sitter fast vid något tillfälle , vilket gör det omöjligt för de förlorade att framgångsrikt starta eller avsluta sorgprocessen. Komplicerat sorg är ofta ett tecken på olösta problem i förhållandet mellan de förlorade och den avlidne som gör det ...

Redaktörens val

Hur man ställer in kartkontroller i Main_iPad. Storyboard i din iOS App - dummies

Hur man ställer in kartkontroller i Main_iPad. Storyboard i din iOS App - dummies

När du har en anpassad vy för MapController i din iOS-app, måste du berätta för iPad-storyboardet att du laddar in din anpassade vy i stället för en UIViewController. Följ dessa steg: Välj Projekt navigator genom att välja Main_iPad. storyboard och välj sedan View Controller i View Controller - Map Scene i dokumentutskriften. ...

Hur man roterar objekt i din iOS-app - dummies

Hur man roterar objekt i din iOS-app - dummies

Här hittar du hur man rotera en vy (i så fall vrid bilen runt) i din iOS-app. För att göra det uppdaterar du den roterande kodstuben du startade med och ersätter den med den fetstilta koden. - (void) rotera {CGAffineTransform transform = CGAffineTransformMakeRotation (M_PI); void (^ animation) () = ^ () {self. bil. transformera = transformera; ...

Hur man ställer in en WeatherController i Main_iPad. storyboard-fil för din iOS-app - dummies

Hur man ställer in en WeatherController i Main_iPad. storyboard-fil för din iOS-app - dummies

Bör du lägga till en ny anpassad vykontroll till din iOS-app innan du fortsätter till dessa steg. Du behöver fortfarande berätta för storyboardet att du vill att den ska ladda den nya anpassade vykontrollen istället för en UIViewController. Följ dessa steg:

Redaktörens val

Spara en grafisk stil i Adobe CS5 Illustrator - dummies

Spara en grafisk stil i Adobe CS5 Illustrator - dummies

Adobe Creative Suite 5 (Adobe CS5) Illustrator tillåter Du sparar en grafisk stil. En grafisk stil är en kombination av alla inställningar du väljer för ett visst filter eller en effekt i Utseendepanelen. Genom att spara informationen i en grafisk stil lagras du dessa attribut så att du snabbt och enkelt kan tillämpa ...

Välj som ett transformationsverktyg i Adobe CS5 Illustrator - dummies

Välj som ett transformationsverktyg i Adobe CS5 Illustrator - dummies

I Adobe Creative Suite 5 (Adobe CS5 ) Illustratör du kan använda markeringsverktyget för att skala och rotera ett valt objekt. Dra begränsningsboxens handtag för att ändra storlek på objektet, eller flytta dig utanför ett handtag och sedan, när markören ändras till en flippig pil (en böjd pil med pilhuvud i båda ändarna), dra till ...

Objekttransformation i Adobe CS5 Illustrator - dummies

Objekttransformation i Adobe CS5 Illustrator - dummies

Verktygen Rotate, Reflect, Scale och Shear i Adobe Creative Suite 5 (Adobe CS5) Illustrator använder alla samma grundläggande steg för att utföra transformationer. Här är fem sätt att transformera ett objekt: en för en godtycklig omvandling och fyra andra för exakta omvandlingar baserat på en numerisk mängd som du anger. Vilkårlig omvandlingsmetod Eftersom detta ...