Innholdsfortegnelse:
Video: Hvordan planlegger jeg en hive-jobb i oozie?
2024 Forfatter: Lynn Donovan | [email protected]. Sist endret: 2023-12-15 23:51
Til planlegge Hive-jobben ved hjelp av Oozie , må du skrive en Hive -handling.
hql) i den.
- Opprett en katalog i HDFS ved å skyte under kommandoen.
- hadoop fs -mkdir -p /user/ oozie /arbeidsflyt/
- Sett arbeidsflyt. xml, Hive script (create_table. hql) og bikube -nettstedet. xml i katalogen som ble opprettet i trinn 2. Du kan bruke kommandoen nedenfor.
Bare så, hvordan kjører jeg Hive-skriptet i oozie?
Kjør Hive Jobs med Oozie
- Spesifiser bikubestedet. xml i jobb-xml-parameteren.
- Angi navnet på skriptet (for eksempel script. q) som inneholder hive-spørringen i script-parameteren.
- Du kan eventuelt legge til egenskaper som brukes av Oozie-oppstartsjobben. Legg til prefikset oozie. launcher til eiendomsnavnene.
Videre, hvordan kjører jeg oozie arbeidsflyt? Kjører Oozie Workflow fra kommandolinjen
- Logg på nettkonsoll.
- Kopier oozie-eksempler til hjemmekatalogen din i nettkonsollen: cp /usr/hdp/current/oozie-client/doc/oozie-examples. tjære. gz.
- Pakk ut filer fra tar tar -zxvf oozie-examples.tar.gz.
- Kopier eksempelkatalogen til HDFS hadoop fs -copyFromLocal eksempler.
I denne forbindelse, hvordan planlegger jeg en Hadoop-jobb?
hvordan planlegge jobber i hadoop - Quora. Den enkleste måten er å pakke inn koden din i et shell-skript og rute det som en cron jobb på kantnoden (noden der du vanligvis sender inn din arbeidsplasser ). Men pakker vanligvis koden i et skript og kjører det som en jobb er vanskelig å feilsøke. teste og vedlikeholde.
Hva er oozie arbeidsflyt?
Oozie er en arbeidsflyt planleggingssystem for å administrere Apache Hadoop-jobber. Oozie arbeidsflyt jobber er rettet asykliske grafer (DAGs) av handlinger. Oozie Koordinatorjobber er tilbakevendende Oozie arbeidsflyt jobber utløst av tid (frekvens) og datatilgjengelighet. Oozie er et skalerbart, pålitelig og utvidbart system.
Anbefalt:
Hvordan planlegger jeg et Google-varsel?
Google Alerts kommer til nytte i en rekke situasjoner, og de er enkle å stille inn: Gå til google.com/alerts i nettleseren din. Skriv inn et søkeord for emnet du vil spore. Velg Vis alternativer for å begrense varselet til en spesifikk kilde, språk og/eller region. Velg Opprett varsel
Hvordan planlegger jeg en sikkerhetskopi i SQL?
Planlagt automatisk sikkerhetskopiering av SQL-database ved hjelp av SSMS Logg inn i SQL Server Management Studio (SSMS) og koble til databasen. Skriv inn navnet på vedlikeholdsplanen du skal lage. Velg nå fra venstre sidevindu, velg Backup Database Task for å sette opp sikkerhetskopieringsprosessen og dra elementet til høyre vindu som vist på bildet
Hvordan planlegger jeg et kalendermøte?
Slik fungerer det Lag enkle regler. Oppsettet er enkelt. Gi Calendly beskjed om tilgjengelighetspreferansene dine, og det vil gjøre jobben for deg. Del lenken din. Del Calendly-lenkene dine via e-post eller bygg den inn på nettstedet ditt. Rute. De velger et tidspunkt og hendelsen legges til i kalenderen din
Hvordan planlegger jeg en Office 365-migrering?
Din Office 365-migreringsplan i fem trinn [Gratis hvitbok] Trinn 1 i din Office 365-migreringsplan: Oppdagelse og vurdering. Trinn 2 i Office 365-migreringsplanen din: Strategisk planlegging. Trinn 3 i Office 365-migreringsplanen din: Pilotmigrering. Trinn 4 i Office 365 Migration Plan: Migrer
Hvordan kjører jeg et PowerShell-skript i Windows planlegger?
Slik: Kjør PowerShell-skript fra TaskScheduler Trinn 1: Åpne Task Scheduler. Åpne oppgaveplan og opprett en ny oppgave. Trinn 2: Sett utløsere. Trinn 3: Lag handlingen din. Trinn 4: Angi argument. Trinn 5: Angi neste argument. Trinn 6: Legg til parametere. Trinn 7: Full argumentasjon. Trinn 8: Lagre den planlagte oppgaven