Android

Amazon automatizálja a Hadoop használatát a fejlesztők számára

New and Reinvented Amazing Selling Machine 11: 2019 - 2020 Top Amazon Business Course

New and Reinvented Amazing Selling Machine 11: 2019 - 2020 Top Amazon Business Course
Anonim

Az Amazon.com elindította a hosted szolgáltatást, amelynek célja, hogy egyszerűsítse a fejlesztők számára a MapReduce programozási modell Hadoop implementációját nagy adatkészletek feldolgozásához a processzorcsoportokban.

Az Amazon Elastic MapReduce nevű cloud computing szolgáltatás a fejlesztők számára készült akiknek nagy mennyiségű adatra van szüksége, amelyekre a Hadoop ideális megoldás.

Az Amazon Elastic MapReduce segítségével számos olyan feladat, amelyet a fejlesztőknek a Hadoop-hoz kapcsolódó manuálisan kell kezelniük, automatizált, a cég Amazon Web Services (AWS) cloud computing divízió szerint egy hivatalos blogban csütörtökön.

[További olvasás: A legjobb TV streaming szolgáltatások]

"Az Elastic MapReduce használatával létrehozhat, futtathatja, felügyelheti és felügyelheti a Hadoop feladatokat pont-és-click könnyű. Nem kell kimennie, és megvásárolja a hardvert. Nem kell felhúzni, hálózatba kapcsolni, vagy adminisztrálni. Nem kell aggódnia, hogy elfogy az erőforrások, vagy megosztja őket a szervezet többi tagjával. Nem kell figyelemmel kísérned, hangolnod kell rá, vagy töltsd ide a rendszer vagy alkalmazás szoftvereinek frissítését "- olvasható a blogbejegyzés.

Az AWS úgy döntött, hogy létrehozza ezt a szolgáltatást, miután megtanulta, hogy az ügyfelek Hadoop feladatokat futtatnak az Amazon Az Elastic Compute Cloud (EC2) szolgáltatás, amely számítástechnikai kapacitást biztosít, hiszen a Hadoop egyre népszerűbbé válik, az Amazon arra törekszik, hogy megkönnyítse más fejlesztők számára, hogy kihasználják a MapReduce nyílt forrású alkalmazásának előnyeit.

Elastic MapReduce EC2 és az Amazon Simple Storage Service (S3) tárolta a tárolófelhő szolgáltatást. "Az Elastic MapReduce automatikusan elindítja a MapReduce keret Hadoop implementációját az Amazon EC2 példányokon, az adatokat egy munkafolyamatban kisebb részekre osztva, így azok feldolgozva - a "térkép" funkció - párhuzamosan, és végül a feldolgozott adatok végső megoldásaként történő újraegyesítésével - a "csökkenteni" funkciót. Az Amazon S3 az elemzés alatt álló adatok forrásaként szolgál, és a végeredmények kimeneti célállomásaként "a szolgáltatás külön leírása szerint.

Mint az egyéb AWS-felhőszolgáltatásokhoz hasonlóan, az Amazon az Elastic MapReduce használatával használata, minimális díj nélkül