Hem Personliga finanser Datahantering för stora data - dummies

Datahantering för stora data - dummies

Video: Säker datahantering 2024

Video: Säker datahantering 2024
Anonim

Är stora data verkligen nya eller är det en utveckling i datahanteringsresan? Det är faktiskt båda. Som med andra vågor i datahantering bygger stora data utöver utvecklingen av datahanteringspraxis under de senaste fem decennierna. Det som är nytt är att för första gången har kostnaden för datorcykler och lagring nått en tipppunkt. Varför är detta viktigt?

För några år sedan skulle organisationer vanligtvis kompromissa genom att lagra ögonblicksbilder eller delmängder av viktig information eftersom kostnaden för lagrings- och bearbetningsgränser förbjöd dem att lagra allt de ville analysera.

I många situationer fungerade denna kompromiss bra. Till exempel kan ett tillverkningsföretag ha samlat maskindata varannan minut för att bestämma systemens hälsa. Det kan dock finnas situationer där ögonblicksbilden inte skulle innehålla information om en ny typ av defekt och det kan gå obemärkt i flera månader.

Med stor data är det nu möjligt att virtualisera data så att den kan lagras effektivt och även utnyttja molnbaserat lagringsutrymme mer kostnadseffektivt. Dessutom har förbättringar i nätverkshastighet och tillförlitlighet tagit bort andra fysiska begränsningar för att kunna hantera stora mängder data i en acceptabel takt.

Lägg till här effekterna av förändringar i pris och sofistikering av datorminnet. Med alla dessa teknikövergångar är det nu möjligt att tänka sig hur företag kan utnyttja data som skulle ha varit otänkbara för bara fem år sedan.

Men ingen teknikövergång sker i isolation. det händer när det finns ett viktigt behov som kan tillgodoses av tillgänglighet och mognad av teknik. Många av teknikerna som ligger till grund för stora data, som virtualisering, parallell bearbetning, distribuerade filsystem och minnesdatabaser har funnits i årtionden.

Avancerad analys har också funnits i årtionden, men de har inte alltid varit praktiska. Annan teknik som Hadoop och MapReduce har varit på plats i bara några år. Denna kombination av tekniska framsteg kan nu hantera betydande affärsproblem. Företagen vill kunna få insikter och genomförbara resultat från många olika typer av data i rätt takt.

Om företag kan analysera dataöverföringar (motsvarande 20 miljoner arkslådor fyllda med textfiler eller 13. 3 år HDTV-innehåll) med godtagbar prestanda för att urskilja mönster och anomalier kan företag börja känna av data på nya sätt.Flyttningen till stora data handlar inte bara om företag.

Vetenskap, forskning och statliga aktiviteter har också bidragit till att driva framåt. Tänk bara på att analysera det mänskliga genomet eller hantera alla astronomiska data som samlats in i observatorier för att öka vår förståelse av världen runt omkring oss. Tänk på hur mycket data regeringen samlar i sina antiterroristaktiviteter också, och du får tanken på att stora data inte bara handlar om affärer.

Det finns olika metoder för hantering av data. Data i rörelse skulle användas om ett företag kan analysera kvaliteten på sina produkter under tillverkningsprocessen för att undvika kostsamma fel. Data i vila skulle användas av en företagsanalytiker för att bättre förstå kundernas nuvarande köpmönster baserat på alla aspekter av kundrelationen, inklusive försäljning, sociala medier och kundservice interaktioner.

Tänk på att företagen fortfarande befinner sig i ett tidigt skede för att utnyttja stora datamängder för att få en 360-graders syn på verksamheten och förutse förändringar och förändringar i kundernas förväntningar. Tekniken som krävs för att få svaren på affärsbehoven är fortfarande isolerad från varandra.

Stora data handlar inte bara om ett verktyg eller en teknik. Det handlar om hur alla dessa tekniker samlas för att ge rätt inblick, i rätt tid, baserat på rätt data - vare sig det genereras av människor, maskiner eller på webben.

Datahantering för stora data - dummies

Redaktörens val

Fastighetsprofessionens grunder för fastighetslicensexamen - dummies

Fastighetsprofessionens grunder för fastighetslicensexamen - dummies

Fastighetsexamen kommer att förvänta dig att du har ett grundläggande grepp på fastighetsbranschen. Du tror att det bara är uppenbart att veta vad de viktigaste spelarna gör i en fastighetsaffär, men på grund av den terminologi de delar, blir skillnaderna mellan spelarna lite muddlade. Här är snabba beskrivningar ...

Kostnadsmetoden för fastighetslicensexamen - dummies

Kostnadsmetoden för fastighetslicensexamen - dummies

En metod för att uppskatta Värdet på fastigheter kallas kostnaden. Du måste känna till formeln för fastighetslicensexamen. Kostnadsmetoden baseras på tanken att komponenterna i en fastighet eller marken och byggnaderna kan läggas till för att komma fram till ...

Studie för fastighetslicensexamen - dummies

Studie för fastighetslicensexamen - dummies

När var sista gången du tog en multipelvalsexamen ? Eller, för den delen, någon examen? Det är troligt att det var länge sedan. Kanske överväger du huruvida du ska bli en fastighetsmäklare, men du är lite avskräckt av tanken på att du måste göra ett test. Vad du kan ...

Redaktörens val

Följer ett basketspel på tv - dummies

Följer ett basketspel på tv - dummies

Du kommer bli mycket mer ute av att titta på ett basketspel på TV - eller till och med leva - om du gör mer än att se bollen gå in i rammen. Kolla in dessa insider tips för att fånga den verkliga åtgärden och öka din njutning av sporten. Förutse nästa pass Försök att tänka som ...

Top 5 Fantasy Basketball League Sites - Dummies

Top 5 Fantasy Basketball League Sites - Dummies

Att hitta och gå med på en fantasy basketplats kan ibland vara skrämmande uppgift eftersom så många alternativ är tillgängliga och de flesta webbplatser ser lika ut. Bara för att webbplatser ser ut som det betyder inte nödvändigtvis att de mäter i värde. Vissa webbplatser erbjuder gratis ligor, andra betalade - och vissa webbplatser tillhandahåller bara standard liga ...

Tryck på motståndarna i Basket - Dummies

Tryck på motståndarna i Basket - Dummies

Pressen är kort för tryck. Ofta kallad en fullrättspress, det här är ett anfallande försvar som används på backen, där målet är att tvinga en omsättning. Vanligtvis används efter en gjord korg, svänger pressgruppen över motståndarna i backcourt; Om motståndarna lyckas få bollen förbi halvvägs (kallad brytning ...

Redaktörens val

Hur R beräknar oändliga, odefinierade och saknade värden - dummies

Hur R beräknar oändliga, odefinierade och saknade värden - dummies

Lyckligtvis kan R hantera dataanomalier som förvirrar några andra statistiska plattformar. I vissa fall har du inte reella värden att beräkna med. I de flesta verkliga dataset saknas faktiskt åtminstone några värden. Dessutom har vissa beräkningar oändlighet som ett resultat (som att dividera med noll) eller kan inte ...

Hur man lägger till linjer i en plot i R-dummies

Hur man lägger till linjer i en plot i R-dummies

I R, lägger du till rader i en plott på ett mycket liknande sätt att lägga till poäng, förutom att du använder funktionen linjer () för att uppnå detta. Men använd först lite R magi för att skapa en trendlinje genom data, kallad en regressionsmodell. Du använder lm () -funktionen för att uppskatta en linjär ...

Hur man lägger till en andra dimension i R-dummies

Hur man lägger till en andra dimension i R-dummies

Förutom vektorer kan R representera matriser som ett objekt du arbetar och beräknar med. Faktum är att R verkligen lyser när det gäller matrisberäkningar och -operationer. Vektorer är nära relaterade till en större klass av objekt, arrays. Arrayer har två mycket viktiga egenskaper: De innehåller bara en enda typ av värde. De har ...