「Apache Hadoop」の主要技術② クラスタリソース管理「YARN」として、「概要」「経緯」「多様な分散処理フレームワークに対応」について紹介します。

「Apache Hadoop」の主要技術② クラスタリソース管理「YARN」

「Apache Hadoop」の主要技術② クラスタリソース管理「YARN」として、「概要」「経緯」「多様な分散処理フレームワークに対応」について紹介します。

■関連する比較ページ

「Apache Hadoop」の主要技術② クラスタリソース管理「YARN」

■概要

YARN(Yet Another Resource Negotiator)は、Hadoopクラスタの「リソース管理」および「ジョブスケジューリング」を担当するモジュールです。

クラスタ内のコンピューティングリソースを効率的に管理し、アプリケーションのスケジューリングをコントロールします。

■経緯

YARNは、Hadoop1系までのMapReduceから「クラスタリソース管理機能」と「ジョブスケジューリング機能」を分離して開発されています。

「クラスタ規模の拡大」「リソース管理の効率化」「MapReduce以外の分散処理の実行」を強化するために開発が続けられています。

■多様な分散処理フレームワークに対応

YARNは「MapReduce(Apache Hadoop)」のみではなく「Apache Spark」や「Apache Storm」などの分散処理フレームワークもサポートしています。

Apache Hadoop最新CLOSEUPコラム

イベント情報

セミナー講演資料

無料資料プレゼント

2021/03/04 セキュリティDAYS Keyspider資料

講演資料を見るには、 プライバシーポリシーに同意して、送付先メールアドレスをご入力しご請求ください。

またご入力いただきました情報は、当該資料の作成・提供企業とも共有させていただき、当社及び各社のサービス、製品、セミナー、イベントなどのご案内に使用させていただきます。

本資料を見るには次の画面でアンケートに回答していただく必要があります。



セミナー講演資料公開中

ビッグデータ処理のデータベースとして MySQL HeatWave が最適な理由 〜AWS Aurora/Redshift、GCP BigQuery との性能&コスト比較〜

データ活用におけるクレンジングの課題 〜「データ連携ツールを使っても非エンジニアには負担」の解決策〜

注目のDB技術「HTAP」とは? ~手軽に、かつ高速に、リアルタイム分析を実現する方法~

  • オープソース書籍(サイド)
  • OSSNEWSに広告を掲載しませんか?

facebook

twitter