Hem Personliga finanser Hadoop-dummies uppkomst och design

Hadoop-dummies uppkomst och design

Video: What is Hadoop? 2024

Video: What is Hadoop? 2024
Anonim

Så vad är det här med det roliga namnet Hadoop? I sin kärna är Hadoop ett ramverk för lagring av data på stora grupper av < Commodity -hårdvara - Daglig datormaskinvara som är överkomlig och lättillgänglig - och kör applikationer mot den data. Ett kluster är en grupp av sammankopplade datorer (känd som noder ) som kan fungera tillsammans om samma problem.

Med hjälp av nätverk av överkomliga beräknade resurser för att skaffa sig affärsinsikt, är Hadops viktiga värdeförslag.

Vad beträffar det namnet Hadoop, leta inte efter någon större betydelse där, det är helt enkelt det namn som Doug Cutting son gav till sin fyllda elefant. (Doug Cutting är givetvis medskaparen av Hadoop.) Namnet är unikt och lätt att komma ihåg - Egenskaper som gjorde det till ett utmärkt val. Hadoop består av två huvudkomponenter: en distribuerad bearbetningsram.

namnet MapReduce (som nu stöds av en komponent som heter YARN) och ett distribuerat filsystem som kallas Hadoop distribuerat filsystem eller HDFS.

En applikation som körs på Hadoop får sitt arbete delat mellan noderna (maskinerna) i klustret, och HDFS lagrar data som ska behandlas. Ett Hadoop-kluster kan omfatta tusentals maskiner, där HDFS lagrar data, och MapReduce-jobb gör bearbetningen nära data, vilket gör att I / O-kostnaderna är låga. MapReduce är extremt flexibel och möjliggör utveckling av ett brett utbud av applikationer.

Som du kanske har antydit är ett Hadoop-kluster en form av

compute cluster, en typ av kluster som används huvudsakligen för beräkningssyfte. I ett beräkningskluster kan många datorer ( beräkna noder ) dela beräkningsbelastningar och dra fördel av en mycket stor aggregerad bandbredd över klustret. Hadoop-kluster består typiskt av några

mästerknutar, som styr lagrings- och bearbetningssystemen i Hadoop och många slavnoder, som lagrar alla klusterdata och finns också där Uppgifterna behandlas.

Hadoop-dummies uppkomst och design

Redaktörens val

Jewish Funeral Traditions - dummies

Jewish Funeral Traditions - dummies

Judiska begravningar sker vanligen i en synagoge, begravningshem eller på en kyrkogård. Med tradition är judiska begravningar enkla (symboliserar tron ​​att människor är alla lika i döden), men de varierar mycket och har ingen uppsättning liturgi. Att skicka blommor till ett begravnings- eller sorgshem är starkt avskräckt i judendomen. Inte bara kommer ...

Identifiera komplicerade grävande dummies

Identifiera komplicerade grävande dummies

Komplicerat roende är det tekniska namnet som sorgproffs ger till en sorgprocess som sitter fast vid något tillfälle , vilket gör det omöjligt för de förlorade att framgångsrikt starta eller avsluta sorgprocessen. Komplicerat sorg är ofta ett tecken på olösta problem i förhållandet mellan de förlorade och den avlidne som gör det ...

Redaktörens val

Hur man ställer in kartkontroller i Main_iPad. Storyboard i din iOS App - dummies

Hur man ställer in kartkontroller i Main_iPad. Storyboard i din iOS App - dummies

När du har en anpassad vy för MapController i din iOS-app, måste du berätta för iPad-storyboardet att du laddar in din anpassade vy i stället för en UIViewController. Följ dessa steg: Välj Projekt navigator genom att välja Main_iPad. storyboard och välj sedan View Controller i View Controller - Map Scene i dokumentutskriften. ...

Hur man roterar objekt i din iOS-app - dummies

Hur man roterar objekt i din iOS-app - dummies

Här hittar du hur man rotera en vy (i så fall vrid bilen runt) i din iOS-app. För att göra det uppdaterar du den roterande kodstuben du startade med och ersätter den med den fetstilta koden. - (void) rotera {CGAffineTransform transform = CGAffineTransformMakeRotation (M_PI); void (^ animation) () = ^ () {self. bil. transformera = transformera; ...

Hur man ställer in en WeatherController i Main_iPad. storyboard-fil för din iOS-app - dummies

Hur man ställer in en WeatherController i Main_iPad. storyboard-fil för din iOS-app - dummies

Bör du lägga till en ny anpassad vykontroll till din iOS-app innan du fortsätter till dessa steg. Du behöver fortfarande berätta för storyboardet att du vill att den ska ladda den nya anpassade vykontrollen istället för en UIViewController. Följ dessa steg:

Redaktörens val

Spara en grafisk stil i Adobe CS5 Illustrator - dummies

Spara en grafisk stil i Adobe CS5 Illustrator - dummies

Adobe Creative Suite 5 (Adobe CS5) Illustrator tillåter Du sparar en grafisk stil. En grafisk stil är en kombination av alla inställningar du väljer för ett visst filter eller en effekt i Utseendepanelen. Genom att spara informationen i en grafisk stil lagras du dessa attribut så att du snabbt och enkelt kan tillämpa ...

Välj som ett transformationsverktyg i Adobe CS5 Illustrator - dummies

Välj som ett transformationsverktyg i Adobe CS5 Illustrator - dummies

I Adobe Creative Suite 5 (Adobe CS5 ) Illustratör du kan använda markeringsverktyget för att skala och rotera ett valt objekt. Dra begränsningsboxens handtag för att ändra storlek på objektet, eller flytta dig utanför ett handtag och sedan, när markören ändras till en flippig pil (en böjd pil med pilhuvud i båda ändarna), dra till ...

Objekttransformation i Adobe CS5 Illustrator - dummies

Objekttransformation i Adobe CS5 Illustrator - dummies

Verktygen Rotate, Reflect, Scale och Shear i Adobe Creative Suite 5 (Adobe CS5) Illustrator använder alla samma grundläggande steg för att utföra transformationer. Här är fem sätt att transformera ett objekt: en för en godtycklig omvandling och fyra andra för exakta omvandlingar baserat på en numerisk mängd som du anger. Vilkårlig omvandlingsmetod Eftersom detta ...