Apache Falcon: Ny datahanteringsplattform för Hadoop-ekosystemet



Apache Falcon är en ny datahanteringsplattform för Hadoop-ekosystemet som förenklar ombordmatning av foderbehandling och foderhantering på hadoop-kluster. Lär dig hur du ställer in det.

Apache Falcon är ett ramverk för att hantera datalivscykeln i Hadoop-kluster. Det etablerar förhållandet mellan olika data och bearbetningselement i en Hadoop-miljö och tillhandahåller också foderhanteringstjänster som foderretention, replikeringar över kluster, arkivering etc.





Låt oss först diskutera hur du installerar Apache Falcon. Kör kommandot nedan för att ladda ner git-arkivet för Falcon:

Kommando: git klon https://git-wip-us.apache.org/repos/asf/falcon.git falcon



git-command-apache-falcon

För att köra falk måste du först bygga den.

Kommando: cd-falk



Kommando: exportera MAVEN_OPTS = ”- Xmx1024m -XX: MaxPermSize = 256m -noverify” && mvn ren installation -DskipTests

Kommando: mvn ren montering: montering -DskipTests -DskipITs

När du väl har byggt falk hittar du ett falkpaket i / falcon / distro / target / katalog.

Kommandona för att bygga falk ser väldigt enkelt ut, men du kommer att möta många problem innan du ser meddelandet Bygg framgång. Jag stod inför många problem när jag byggde den för Hadoop-2.2.0

Så för att hoppa över smärtan med att bygga Falcon, ger jag dig ett framgångsrikt byggt falkpaket, som du kan ladda ner med hjälp av länken nedan.

https://edureka.wistia.com/medias/xw5cfzqmho/download?media_file_id=124642564

Packa upp filen för att få katalogen falcon-0.10.

Kommando: packa upp falk-0.10-SNAPSHOT.zip

Ställ in flacon-miljövariabler i .bashrc-filen.

Kommando: sudo gedit .bashrc

Kommando: källa .bashrc

Du kan gå till falkatalogen och se filerna och katalogerna inuti den.

Kommando: cd falcon-0.10-SNAPSHOT /

Kommando: ls

Du hittar falkskript i bin-katalogen.

Kör under kommandot för att starta Falcon.

Kommando: ./bin/falcon-start

Du ser en ny demon FalconServer som körs nu.

Kommando: jps

Kommando: ./bin/falcon admin-version

Öppna din webbläsare och gå till lokal värd: 15000 . Du kan se Falcon web ui.

Har du en fråga till oss? Nämn dem i kommentarsektionen så återkommer vi till dig.

vad är sas programmeringsspråk

Relaterade inlägg:

Borra ner på Apache Drill