Android

Amazon Automates utilizează Hadoop pentru dezvoltatori

Watch an army of robots efficiently sorting hundreds of parcels per hour

Watch an army of robots efficiently sorting hundreds of parcels per hour
Anonim

Amazon.com a lansat un serviciu găzduit pentru a simplifica pentru dezvoltatori utilizarea implementării Hadoop a modelului de programare MapReduce pentru procesarea seturilor mari de date în clustere de procesoare.

Amazon Elastic MapReduce, serviciul de cloud computing este destinat dezvoltatorilor ale căror aplicații trebuie să creeze cantități mari de date, pentru care Hadoop este ideal.

Cu Amazon Elastic MapReduce, multe dintre sarcinile pe care dezvoltatorii ar trebui să le gestioneze manual legate de Hadoop sunt automatizate, compania cloud computing Amazon Web Services (AWS) a spus intr-un blog oficial joi.

[Cititul suplimentar: cele mai bune servicii de streaming TV]

"Folosind Elastic MapReduce, poti crea, rula, monitoriza si controla joburile Hadoop cu ușurință punct-și-clic. Nu trebuie să ieșiți și să cumpărați pachete hardware. Nu trebuie să o rack, să o conectați sau să o administrați. Nu trebuie să vă faceți griji cu privire la lipsa resurselor sau la împărtășirea acestora cu alți membri ai organizației dvs. Nu trebuie să îl monitorizați, să-l reglați sau să petreceți timp pentru a actualiza sistemul sau aplicația software de pe acesta ", afișează blog-ul.

AWS a decis să creeze acest serviciu după ce a aflat că are clienți care lucrează la Hadoop pe Amazon Serviciul Elastic Compute Cloud (EC2), care oferă o capacitate de calcul găzduită. Deoarece Hadoop devine din ce în ce mai popular, Amazon își propune să ușureze și alte dezvoltatori să profite de această implementare open-source a MapReduce

Elastic MapReduce lucrează împreună cu EC2 și serviciul de stocare simplă Amazon (S3) au găzduit un serviciu de stocare în cloud. "Elastic MapReduce rulează automat o implementare Hadoop a cadrului MapReduce pe instanțele Amazon EC2, împărțind datele într-un flux de locuri de muncă în bucăți mai mici astfel încât să poată fi prelucrate - funcția "hartă" - în paralel și, eventual, recombinarea datelor prelucrate în soluția finală - funcția "reduce". Amazon S3 servește ca sursă pentru datele analizate și ca destinație de ieșire pentru rezultatele finale ", conform unei descrieri separate a serviciului.

Ca și în cazul altor servicii cloud AWS, Amazon percepe taxe pentru Elastic MapReduce bazat pe fără taxă minimă.