Batch Processing: En introduktion

Batchbehandling er ganske enkelt den proces, hvorved en computer udfører en række opgaver, ofte samtidig, i en sekventiel rækkefølge uden stop. Det er også en kommando, der sikrer, at store job beregnes i små dele af hensyn til effektiviteten under fejlfindingsprocessen.

Denne kommando går under mange navne, herunder Workload Automation (WLA) og Job Scheduling. Som de fleste ting inden for programmering er den ændret over tid. Heldigvis har disse ændringer gjort batchjobbehandling mere sofistikeret og effektiv. For mange virksomheder er det en nødvendig komponent for deres daglige succes.

I denne artikel giver vi et overblik over batchbehandling, ser på anvendelsestilfælde samt fordele og ulemper og giver derefter vejledning til at afgøre, om batchbehandling er det rigtige for dig.

Evolutionen af batchbehandling

I dag er et definerende kendetegn ved batchbehandling dens mangel på brugerinteraktion. Der er få, om nogen, manuelle processer til at sætte den i gang. Det er en del af det, der gør den så succesfuld og effektiv, men det har ikke altid været tilfældet. Batchbehandling begyndte med brugen af stempelkort, der blev tabuleret for at fortælle computere, hvad de skulle gøre. Ofte blev der behandlet flere kortspil eller partier af kort på én gang. Denne praksis går tilbage til 1890, hvor Herman Hollerith skabte stempelkort til behandling af folketællingsdata. Han arbejdede for U.S. Census Bureau og udviklede et system, hvor et kort, som han stansede manuelt, blev læst af en elektromekanisk enhed. Hollerith dannede snart et lille firma, som vi i dag kender som IBM.

Punchkortet revolutionerede den måde, virksomheder fungerede på – men det var dengang. I løbet af de sidste to årtier har batchbehandling fortsat sin udvikling. Det er ikke længere nødvendigt med fagfolk til dataindtastning. De fleste batchbehandlingsfunktioner aktiveres uden interaktion, og de gennemføres for at opfylde bestemte tidskrav. Nogle opgaver udføres i realtid med daglige overvågnings- og rapporteringsfunktioner, andre udføres straks.

Afhængigheder og overvågere i batchbehandling

Dags batchbehandling anvender undtagelsesbaserede ledelsesadvarsler til at underrette de rette personer, hvis der opstår problemer. Dette giver lederne frihed til at arbejde uden regelmæssigt at tjekke, hvordan det går med batches. Ideen er, at lederne slet ikke behøver at tjekke ind, medmindre de modtager en advarsel om en kritisk undtagelse.

Udtagelser bestemmes af et system af afhængigheder og monitorer, der er afgørende for softwaren:

• Afhængigheder er de begivenheder, der udløser, at batchbehandlingen starter. Det kan være, at en kunde afgiver en online-bestilling, eller at en bruger har anmodet om nye forsyninger, hvilket udløser systemet til at generere en anmodning … Afhængigheden har sat batchbehandlingen i gang.
• Overvågningsenheder ser efter abnormiteter i batchbehandlingen. Måske tager det længere tid end normalt for et job at blive afsluttet. Det næste job kan ikke begynde, før det foregående job er afsluttet. Hvis dette forårsager en usædvanlig forsinkelse, fanger monitoren det og genererer en undtagelse og sender den til en manager.

Hvornår skal batchbehandling bruges

Du kan forvente forsinkelser, når du bruger batchbehandling. I mange situationer er denne type forsinkelse, før overførslen af data begynder, dog ikke et stort problem – de processer, der bruger denne funktion, er ikke missionskritiske på netop det tidspunkt.

Batchbehandling bør overvejes i situationer, hvor:

• Real-timeoverførsler og -resultater er ikke afgørende
• Store datamængder skal behandles
• Data tilgås i batches i modsætning til i streams
• Komplekse algoritmer skal have adgang til hele batchen
• Tabeller i relationelle databaser skal sammenføjes
• Arbejdet er gentagende

Fordele ved batchbehandling

Der er en række grunde til, at virksomheder implementerer Batch Processing-systemer. Virksomhedsejere bør se på den samlede virkning, når de beslutter sig for ny software til deres organisation.

Speed, til lavere omkostninger

Da batchbehandling ikke har brug for Data Entry-kontorer til at støtte dens funktion, hjælper det med at reducere de driftsomkostninger, som virksomheder bruger på arbejdskraft. Det kræver heller ikke yderligere hardware for at fungere, ud over en computer.

Faktisk kan brugen af batchbehandling reducere en virksomheds afhængighed af andre dyre stykker hardware, hvilket gør det til en relativt billig løsning, der hjælper virksomheder med at spare penge og tid. Uden mulighed for brugerfejl bliver batchprocesser gennemført på den mest effektive måde. Resultatet er hurtig og præcis behandling og ledere, der har mere tid til at bruge på den daglige drift.

Offline-funktioner

Batchbehandlingssystemer fungerer offline, så når arbejdsdagen slutter, arbejder batch-systemerne stadig i baggrunden og kører videre. Dette giver lederne ultimativ kontrol over, hvornår processerne skal startes.

Softwaren kan indstilles til behandling af visse batches om natten, hvilket er en praktisk løsning for virksomheder, der ikke ønsker, at en opgave som automatiske downloads skal forstyrre de daglige aktiviteter.

Nemt hands-off management

Ledere har nok at se til uden at logge ind hver time for at tjekke deres batches. Det undtagelsesbaserede notifikationssystem i moderne batchbehandlingssoftware gør det nemt for ledere at udføre deres arbejde uden at skulle bekymre sig om, hvorvidt deres software fungerer korrekt, og om batcherne bliver afsluttet. Hvis der er et problem, sendes notifikationer til de rette personer, der kan løse det. Lederne kan tage en hands-off-tilgang og stole på, at deres batchbehandlingssoftware gør sit arbejde.

Enkelhed

Sammenlignet med realtidsbehandling eller strømbehandling er batchforarbejdning betydeligt mindre kompleks: Det kræver ikke konstant systemunderstøttelse af dataindtastning eller unik hardware. Når først et batchsystem er installeret og etableret, kræver det ikke tung vedligeholdelse, hvilket gør det til en løsning med relativt lav adgangsbarriere.

Ulemper ved batchforarbejdning

Mens batchforarbejdning er fantastisk til mange scenarier, bør ejerne også overveje disse komponenter, som kan være ulemper for visse virksomheder.

Implementering og uddannelse

Som med enhver ny teknologi er der en vis grad af uddannelse forbundet med at administrere disse systemer. Chefer, der ikke er fortrolige, skal bl.a. forstå, hvad der udløser en batch, hvordan man planlægger dem, og hvad undtagelsesmeddelelser betyder.

Kompleks fejlfinding

Når der opstår en fejl, skal cheferne også vide, hvordan de skal rette den. Debugging af batchbehandlingssystemer kan forståeligt nok være komplekst. Du har sandsynligvis brug for en intern medarbejder, der er specialiseret i disse systemer; ellers skal du forvente en ekstra omkostning, når du har brug for hjælp fra en ekstern konsulent.

Kost

Mens de fleste virksomheder sparer penge på arbejdskraft og hardware, når de skifter til batching, har nogle virksomheder ikke dataindtastningskontorer eller dyre hardwarebehov til at begynde med. For disse virksomheder kan omkostningerne ved nogle batching-systemer virke uoverkommelige.

Batch Processing vs Stream Processing

I betragtning af fordelene ved begge dele står mange organisationer over for dilemmaet om, hvad der er bedst: batch processing eller stream processing? Selv om et entydigt svar kunne være ideelt, er der ikke en enkelt mulighed, der er den perfekte løsning for alle tilfælde, men den optimale metode varierer snarere afhængigt af behov, virksomheden og den specifikke situation.

Med sin evne til at behandle store datamængder på én gang, selv millioner af poster, der lagres og gemmes op i løbet af dagen, er batchbehandling en god mulighed for ting, der kan vente til efter kontorets lukketid. Eksempler er ting som:

• Alle linjepostfakturaer
• Lønprocesser
• Alle de enkelte transaktioner, som en finansiel virksomhed kan indsende i løbet af en given uge

Stream Processing er på den anden side nyttig til processer eller systemer, der er afhængige af at have adgang til data i realtid. Ved at kunne analysere streamingdata næsten øjeblikkeligt er denne metode bedre egnet til scenarier, hvor begivenhederne sker ofte og tæt på hinanden, og hvor man ikke kan vente til om aftenen, indtil computerne er inaktive. Denne type behandling bruges bedst til opgaver som cybersikkerhed og svindelopdagelse, da disse skal findes med det samme, så risici kan begrænses.

Mange organisationer har fundet ud af, at en kombination af batch- og streambehandling er den mest fordelagtige for arbejdsgange, idet hver metode udnyttes efter behov.

Har jeg brug for batchbehandling?

Hvis du stadig spekulerer på, om batchbehandling er den rigtige løsning for dig, så tænk på eksempler på, hvor du kan bruge denne funktion i din virksomhed. Er der huller, som du kan udfylde med automatisering?

For at nævne nogle få, kan disse omfatte:

• Lønprocesser og medarbejdernes timesedler
• Bankafregninger
• Linjepostfakturering
• Stream, Analyse og transaktionsbehandling
• Forskning og rapportering
• Emailsystemer
• Lagervirksomhedskæde og opfyldelse
• Andre anmodninger

Som en tommelfingerregel, hvis du oplever, at du regelmæssigt udfører store computeropgaver manuelt, er der en god chance for, at den rigtige software til batchbehandling kan være nøglen til at frigøre mere tid og flere penge for din organisation.

Der er også et par spørgsmål, du skal overveje, når du beslutter, om din virksomhed har brug for Batch Processing:

• Hvordan sikrer du, at manuelle opgaver bliver udført korrekt? Har du et system til at fastslå, at de er blevet indsendt og behandlet i den rigtige rækkefølge?
• Har du opgaver, der venter på at blive startet, og som er betinget af, at en anden opgave bliver afsluttet? Har du et system til at spore hvert enkelt job, indtil det er færdigt, eller som ved, hvornår det første job vil være færdigt?
• Kontrollerer du manuelt for nye filer? Sløjfer dit script ofte nok til at være effektivt, når du kontrollerer efter filer?
• Har du en nuværende opsætning med gentagelsesforsøg på jobniveau på din server? Hvilken indvirkning har det? Ville du have gavn af mindre stress på serveren?
• Hvordan sporer du afhængigheder på tværs af servere? Hvordan ved du, at den afhængige server vil være tilgængelig, når der er brug for den?

Automatiser jobplanlægning for din virksomhed

Det er meningen, at moderne systemer skal frigøre ledere fra daglige detaljer, forhindre brugerfejl og fremme hurtig og effektiv udførelse af job med lidt overvågning. Batch Processing har den ekstra effekt at spare penge for næsten alle de virksomheder, der implementerer det.

Det er dog ikke uden sine overvejelser, som nævnt ovenfor. Virksomheder uden it-medarbejdere til at implementere en vellykket implementerings- og vedligeholdelsesplan kan stadig drage fordel af batchbehandling, men de bør forberede sig på i første omgang at investere tid og penge i et samarbejde med it-eksperter for at sikre en vellykket lancering og slutbrugeroplevelse.

BMC til automatisering af arbejdsbyrder

For mere om dette emne, se vores BMC Workload Automation Blog. Er du klar til at se, hvad BMC kan gøre for din virksomhed? Udforsk automatisering af arbejdsbyrder, herunder batchbehandling, med Control-M.

Få en moderne tilgang til batchbehandling

Orkestrering af applikationsworkflow er en moderne tilgang til batch, der kan forhindre produktionsfejl, så du kan levere service til tiden, hver gang du skal levere den. Læs e-bogen ‘

Disse indlæg er mine egne og repræsenterer ikke nødvendigvis BMC’s holdning, strategier eller mening.

Ser du en fejl eller har du et forslag? Lad os venligst vide det ved at sende en e-mail til [email protected].