Middleware Tjänster: Data rörelse och data laddning - dummies <[SET:descriptionsv]I de flesta situationer, de två middleware-tjänsterna - val av

I de flesta situationer två middleware-tjänster - urval och utvinning och kvalitetssäkring - äger rum på samma plattform (system) där datakällan finns. Om ditt datalager kommer att vara värd på en annan plattform än datakällan, måste du använda en dataförflyttningstjänst för att åstadkomma dataöverföring från system till system.

Du kan förmodligen använda en relativt enkel tjänst (hanteras av ett enkelt filöverföringsprogram, till exempel). Förflyttningstjänsten, om du behöver den just nu, flyttar helt enkelt QA'd-data till den miljö där du planerar att göra ytterligare omvandlingar.

Om du gör din omvandling och QA-bearbetning på en plattform som skiljer sig från plattformen där du kör ditt produktionsdatabutik (på en utvecklingsserver, till exempel i stället för på operativservern) måste du utföra en ytterligare dataförflyttningstjänst för att få uppgifterna till den plats där du vill att den så småningom bor. Denna process involverar vanligtvis bara en relativt enkel filöverföring.

Datatilläggstjänsten laddar upp den extraherade, QA'd, transformerade och re-QA'd data till ditt lager. Du kan ladda data via ett anpassat program, SQL (ett INSERT-meddelande, till exempel) eller ett verktyg.

Om du behöver ladda en stor mängd data, försök använda ett snabbladdningsverktyg, vilket vanligtvis innebär mycket mindre tid än en programmatisk eller SQL-baserad tillvägagångssätt.

Om du använder SQL för att ladda data till en relationsdatabas, försök att göra laddningen så effektiv som möjligt genom att stänga av loggning (om din DBMS-produkt tillåter det). Om laddningsuppgiften är onormalt avslutad behöver du bara använda DROP- eller TRUNCATE-satsen för att bli av med ditt delat lastade bord, åtgärda problemet som orsakade uppsägningen och starta om jobbet.

Denna process är vanligtvis mycket snabbare än om du slår på de faciliteter som behövs för OLTP-stildata och transaktionsintegritet (med tillhörande kostnader).