Hem Personliga finanser Image Klassificering med Hadoop-dummies

Image Klassificering med Hadoop-dummies

Video: Grundämnen och kemiska föreningar. Rena ämnen och blandningar 2024

Video: Grundämnen och kemiska föreningar. Rena ämnen och blandningar 2024
Anonim

Bildklassificering kräver En betydande mängd databehandlingsresurser, som dock har begränsat omfattningen av implementeringar. Bildklassificering är ett hett ämne i Hadoop-världen eftersom ingen traditionell teknik kunde - tills Hadoop kom med - öppna dörrar för den här typen av dyr bearbetning i så stor och effektiv skala.

Bildklassificering börjar med att du bygger en träningsuppsättning och att datorer lär sig att identifiera och klassificera vad de tittar på. På samma sätt som att ha mer data bidrar till att bygga bättre bedrägeri upptäckt och riskmodeller, det hjälper också system att bättre klassificera bilder.

I detta användningsfall kallas data som träningsuppsättning samt modellerna klassificerare. Klassificeringar känner igen funktioner eller mönster inom ljud, bild eller video och klassificera dem på lämpligt sätt. Klassificerare är byggda och iterativt raffinerade från träningssatser så att deras precisionsresultat (ett mått på exakthet) och återkallningsresultat (ett mått på täckning) är höga.

Hadoop passar utmärkt för bildklassificering eftersom det ger en massivt parallell bearbetningsmiljö för att inte bara skapa klassificeringsmodeller (iterera över träningsuppsättningar) utan också ge nästan obegränsad skalbarhet för att bearbeta och köra dessa klassificatorer över massiva uppsättningar ostrukturerad datamängder.

Tänk på multimediakällor som YouTube, Facebook, Instagram och Flickr - alla är källor till ostrukturerad binär data. Figuren visar på ett sätt att du kan använda Hadoop för att skala bearbetningen av stora volymer lagrade bilder och video för multimedia semantisk klassificering.

Du kan se hur alla begrepp som rör Hadoop-behandlingsramen tillämpas på dessa data. Lägg märke till hur bilder laddas i HDFS. Klassificeringsmodellerna, som byggts över tiden, appliceras nu på de extra bildfunktionskomponenterna i kartfasen av denna lösning. Som du kan se i det nedre högra hörnet består utdata från denna behandling av bildklassificeringar som sträcker sig från tecknade till sport och platser bland annat.

Hadoop kan också användas för ljud- eller röstanalys. En säkerhetsindustriklient vi jobbar med skapar ett ljudklassificeringssystem för att klassificera ljud som hörs via akustiskt berikade fiberoptiska kablar som ligger runt omkretsen av kärnreaktorer.

Det här systemet vet till exempel hur man direkt kan klassificera vindens viskning i jämförelse med viskningen av en mänsklig röst eller för att urskilja ljudet av mänskliga fotspår som går i perimeterparken från djurlivet.

Den här beskrivningen kan ha en typ av Star Trek känner till det, men du kan nu se levande exempel. I själva verket gör IBM ett av de största bildklassificeringssystemen i världen, via IBM Multimedia Analysis and Retrieval System (IMARS).

Här är resultatet av en IMARS-sökning på termen alpin skidåkning. Överst i figuren kan du se resultaten från klassificeringsmedlemmarna mappade till bildsatsen som bearbetades av Hadoop, tillsammans med ett tillhörande taggmoln.

Observera den mer grovt definierade förälderklassificeringen, i motsats till den mer granulära. Faktum är att märka de olika klassificeringsnivåerna: rullar in, som rullar in - alla genereras automatiskt av klassificeringsmodellen, byggd och målad med Hadoop.

Ingen av dessa bilder har några tillagda metadata. Ingen har öppnat iPhoto och taggat en bild som vintersport för att få det att visas i denna klassificering. Det är vintersportklassificatorn som byggdes för att känna igen bildattribut och egenskaper hos sport som spelas i vinterinställning.

Bildklassificering har många tillämpningar och att kunna utföra denna klassificering i stor skala med Hadoop öppnar upp fler möjligheter till analys, eftersom andra tillämpningar kan använda klassificeringsinformationen som genereras för bilderna.

Titta på detta exempel från hälsovården. Ett stort hälsobyrå i Asien fokuserade på att leverera vård via mobila kliniker till en landsbygdsbefolkning fördelad över en stor landmassa. Ett betydande problem som byrån ställde inför var den logistiska utmaningen att analysera de medicinska avbildningsdata som genererades i sina mobila kliniker.

En radiolog är en knapp resurs i denna del av världen, så det var förnuftigt att sända de medicinska bilderna centralt till en central punkt och få en armé av läkare att undersöka dem. Läkarna som granskade bilderna var dock snabbt överbelastade.

Byrån arbetar nu med ett klassificeringssystem som hjälper till att identifiera möjliga förutsättningar för att effektivt ge förslag till läkare att verifiera. Tidig testning har visat denna strategi för att minska antalet missade eller felaktiga diagnoser, vilket sparar tid, pengar och framförallt liv.

Image Klassificering med Hadoop-dummies

Redaktörens val

Jewish Funeral Traditions - dummies

Jewish Funeral Traditions - dummies

Judiska begravningar sker vanligen i en synagoge, begravningshem eller på en kyrkogård. Med tradition är judiska begravningar enkla (symboliserar tron ​​att människor är alla lika i döden), men de varierar mycket och har ingen uppsättning liturgi. Att skicka blommor till ett begravnings- eller sorgshem är starkt avskräckt i judendomen. Inte bara kommer ...

Identifiera komplicerade grävande dummies

Identifiera komplicerade grävande dummies

Komplicerat roende är det tekniska namnet som sorgproffs ger till en sorgprocess som sitter fast vid något tillfälle , vilket gör det omöjligt för de förlorade att framgångsrikt starta eller avsluta sorgprocessen. Komplicerat sorg är ofta ett tecken på olösta problem i förhållandet mellan de förlorade och den avlidne som gör det ...

Redaktörens val

Hur man ställer in kartkontroller i Main_iPad. Storyboard i din iOS App - dummies

Hur man ställer in kartkontroller i Main_iPad. Storyboard i din iOS App - dummies

När du har en anpassad vy för MapController i din iOS-app, måste du berätta för iPad-storyboardet att du laddar in din anpassade vy i stället för en UIViewController. Följ dessa steg: Välj Projekt navigator genom att välja Main_iPad. storyboard och välj sedan View Controller i View Controller - Map Scene i dokumentutskriften. ...

Hur man roterar objekt i din iOS-app - dummies

Hur man roterar objekt i din iOS-app - dummies

Här hittar du hur man rotera en vy (i så fall vrid bilen runt) i din iOS-app. För att göra det uppdaterar du den roterande kodstuben du startade med och ersätter den med den fetstilta koden. - (void) rotera {CGAffineTransform transform = CGAffineTransformMakeRotation (M_PI); void (^ animation) () = ^ () {self. bil. transformera = transformera; ...

Hur man ställer in en WeatherController i Main_iPad. storyboard-fil för din iOS-app - dummies

Hur man ställer in en WeatherController i Main_iPad. storyboard-fil för din iOS-app - dummies

Bör du lägga till en ny anpassad vykontroll till din iOS-app innan du fortsätter till dessa steg. Du behöver fortfarande berätta för storyboardet att du vill att den ska ladda den nya anpassade vykontrollen istället för en UIViewController. Följ dessa steg:

Redaktörens val

Spara en grafisk stil i Adobe CS5 Illustrator - dummies

Spara en grafisk stil i Adobe CS5 Illustrator - dummies

Adobe Creative Suite 5 (Adobe CS5) Illustrator tillåter Du sparar en grafisk stil. En grafisk stil är en kombination av alla inställningar du väljer för ett visst filter eller en effekt i Utseendepanelen. Genom att spara informationen i en grafisk stil lagras du dessa attribut så att du snabbt och enkelt kan tillämpa ...

Välj som ett transformationsverktyg i Adobe CS5 Illustrator - dummies

Välj som ett transformationsverktyg i Adobe CS5 Illustrator - dummies

I Adobe Creative Suite 5 (Adobe CS5 ) Illustratör du kan använda markeringsverktyget för att skala och rotera ett valt objekt. Dra begränsningsboxens handtag för att ändra storlek på objektet, eller flytta dig utanför ett handtag och sedan, när markören ändras till en flippig pil (en böjd pil med pilhuvud i båda ändarna), dra till ...

Objekttransformation i Adobe CS5 Illustrator - dummies

Objekttransformation i Adobe CS5 Illustrator - dummies

Verktygen Rotate, Reflect, Scale och Shear i Adobe Creative Suite 5 (Adobe CS5) Illustrator använder alla samma grundläggande steg för att utföra transformationer. Här är fem sätt att transformera ett objekt: en för en godtycklig omvandling och fyra andra för exakta omvandlingar baserat på en numerisk mängd som du anger. Vilkårlig omvandlingsmetod Eftersom detta ...