Çfarë është AWS MapReduce?
Çfarë është AWS MapReduce?

Video: Çfarë është AWS MapReduce?

Video: Çfarë është AWS MapReduce?
Video: Где находится нофелет? (FullHD, комедия, реж.Геральд Бежанов, 1987 г.) 2024, Mund
Anonim

Amazon Elastic MapReduce (EMR) është një shërbim i uebit i Amazon ( AWS ) mjet për përpunimin dhe analizën e të dhënave të mëdha. Amazon EMR përpunon të dhëna të mëdha nëpër një grup serverësh virtualë Hadoop në Amazon Elastic Compute Cloud (EC2) dhe Amazon Simple Storage Service (S3).

Në këtë mënyrë, si funksionon AWS EMR?

Shërbimi fillon një numër të specifikuar nga klienti i instancave të Amazon EC2, të përbërë nga një master dhe shumë nyje të tjera. Amazon EMR ekzekuton softuerin Hadoop në këto raste. Nyja kryesore ndan të dhënat hyrëse në blloqe dhe shpërndan përpunimin e blloqeve tek nyjet e tjera.

Përveç sa më sipër, cili është ndryshimi midis ec2 dhe EMR? Ndryshe nga EMR , EC2 nuk i kategorizon nyjet skllave në nyje kryesore dhe detyrë. Kjo rrit rrezikun e humbjes së të dhënave HDFS në rast se një nyje hiqet/humbet. EC2 përdor bibliotekat Apache (s3a) për të hyrë në të dhënat në s3. Ne anen tjeter, EMR përdor kodin e pronarit AWS për të pasur akses më të shpejtë në s3.

Për më tepër, a menaxhohet plotësisht AWS EMR?

Amazon Reduktimi elastik i hartës ( EMR ) Eshte nje menaxhuar plotësisht Platforma Hadoop dhe Spark nga Amazon Shërbimi në internet ( AWS ). Me EMR , AWS klientët mund të rrotullojnë shpejt grupet Hadoop me shumë nyje për të përpunuar ngarkesat e punës me të dhëna të mëdha.

A përdor AWS Hadoop?

Amazon Shërbimet Web përdor Apache me burim të hapur Hadoop shpërndau teknologjinë informatike për ta bërë më të lehtë aksesin në sasi të mëdha të fuqisë kompjuterike për të kryer detyra me të dhëna intensive. Hadoop , versioni me burim të hapur i MapReduce të Google, tashmë po përdoret nga kompani të tilla si Yahoo dhe Facebook.

Recommended: