기계적 인조 인간

Amazon에서 개발자를위한 Hadoop 사용 자동화

What is AWS EMR | Introduction to Amazon EMR | Data Processing with AWS EMR | AWS Training | Edureka

What is AWS EMR | Introduction to Amazon EMR | Data Processing with AWS EMR | AWS Training | Edureka
Anonim

Amazon.com은 개발자가 Map Cluster Suite의 Hadoop 구현을 사용하여 프로세서 클러스터에서 대규모 데이터 세트를 처리 할 수 ​​있도록 단순화 된 호스팅 서비스를 시작했습니다.

Amazon Elastic MapReduce라는 클라우드 컴퓨팅 서비스는 개발자를 대상으로합니다 Hadoop이 이상적으로 적합한 대용량 데이터를 처리해야하는 애플리케이션을 필요로합니다. Amazon Elastic MapReduce를 사용하면 개발자가 Hadoop과 관련하여 수동으로 처리해야하는 많은 작업이 자동화되므로 Amazon Web Services (AWS) 클라우드 컴퓨팅

[추가 읽기: 최고의 TV 스트리밍 서비스]

"Elastic MapReduce를 사용하여 Hadoop 작업을 생성, 실행, 모니터링 및 제어 할 수 있습니다. 포인트 앤 클릭 방식으로 쉽게 사용할 수 있습니다. 당신은 나가서 하드웨어를 구입하지 않아도됩니다. 랙에 넣거나 네트워크로 연결하거나 관리 할 필요가 없습니다. 리소스가 부족하거나 조직의 다른 구성원과 공유하는 것에 대해 걱정할 필요가 없습니다. 블로그 게시판에 읽음표가 표시됩니다.

AWS는 Amazon에서 하둡 (Hadoop) 작업을 실행중인 고객을 확인한 후이 서비스를 만들기로 결정했습니다. 호스팅 된 컴퓨팅 기능을 제공하는 EC2 (Elastic Compute Cloud) 서비스 Hadoop이 점점 대중화되기 때문에 Amazon은 다른 개발자가 MapReduce의 오픈 소스 구현을보다 쉽게 ​​활용할 수 있도록 노력할 것입니다.

Elastic MapReduce는 EC2 및 Amazon Simple Storage Service (S3) 호스팅 스토리지 클라우드 서비스를 제공합니다. "Elastic MapReduce는 Amazon EC2 인스턴스에서 MapReduce 프레임 워크의 Hadoop 구현을 자동으로 회전시켜 작업 흐름의 데이터를 작은 덩어리로 분할하여 처리 - '지도'기능 -을 병렬 처리하고 결국 처리 된 데이터를 최종 솔루션 인 '축소'기능으로 재결합합니다. 아마존 S3는 분석 대상 데이터의 소스로, 최종 결과의 출력 대상으로 사용된다 "고 말했다. 다른 AWS 클라우드 서비스와 마찬가지로 Amazon은 자사의 서비스를 기반으로하는 Elastic MapReduce를 청구한다. 사용료를 지불해야합니다.