Çfarë është DistCp në Hadoop?
Çfarë është DistCp në Hadoop?

Video: Çfarë është DistCp në Hadoop?

Video: Çfarë është DistCp në Hadoop?
Video: Çfarë është hepatiti B dhe cilët janë shkaktarët e tij? Mjeku shpjegon rreziqet| ABC News Albania 2024, Nëntor
Anonim

DistCp (kopje e shpërndarë) është një mjet që përdoret për kopjim të madh ndër/intra-grup. Ajo përdor MapReduce për të realizuar shpërndarjen e tij, trajtimin dhe rikuperimin e gabimeve dhe raportimin. Ai zgjeron një listë skedarësh dhe drejtorish në hyrje për detyrat e hartës, secila prej të cilave do të kopjojë një ndarje të skedarëve të specifikuar në listën burimore.

Në mënyrë të ngjashme dikush mund të pyesë, a mbishkruan Distcp?

Unë gjithashtu duhet të shtjelloj disa dhe ta shpjegoj atë diskp - mbishkruaj do mbishkruaj skedari pa marrë parasysh nëse madhësia përputhet apo jo. Kjo do të përditësojë të gjithë skedarët në hdfs-nn2 që nuk përputhen në madhësi nga hdfs-nn1, si dhe do të fshijë çdo skedar të jashtëm.

Në mënyrë të ngjashme, çfarë është komanda Hadoop FS? Sistemi i skedarëve ( FS ) guaska përfshin të ndryshme të ngjashme me guaskën komandat që ndërveprojnë drejtpërdrejt me Hadoop Sistemi i skedarëve të shpërndarë ( HDFS ) si dhe sisteme të tjera skedarësh që Hadoop mbështet, të tilla si Local FS , HFTP FS , S3 FS , dhe të tjerët.

Në këtë mënyrë, si mund të transferoj të dhëna nga një Hdf në një tjetër Hdf?

Hadoop fs cp – Më e lehtë mënyrë për të kopjuar të dhënat nga një drejtoria burimore për të një tjetër . Përdorni hadoop fs -cp [burimi] [destinacioni]. Hadoop fs copyFromLocal – Duhet kopjoni të dhënat nga sistemi lokal i skedarëve në HDFS ? Përdorni hadoop fs -copyFromLocal [burimi] [destinacioni].

Si mund të kopjoj një grup nga një grup në tjetrin?

Kopjimi i skedarëve ndërmjet grupime . Ti mundesh kopjoni skedarët ose direktoriume ndërmjet të ndryshme grupime duke përdorur komandën hadoop distcp. Ju duhet të përfshini një kredenciale dosje në tuajën kopje kerkoj pra burimin grumbull mund të vërtetojë se jeni vërtetuar në burim grumbull dhe objektivi grumbull.

Recommended: