Shoeisha Technology Media

CodeZine(コードジン)

記事種別から探す

Hadoopクラスタを簡単に実行できるHDInsightと、新しいAzure Data Lakeサービスを一般公開

連載:ScottGu's Blog翻訳

  • LINEで送る
  • このエントリーをはてなブックマークに追加
2015/10/09 14:00

 本稿は、Scott Guthrie氏のブログを、氏の許可を得て、翻訳、転載したものです。米Microsoft社の副社長で、ASP.NETやSilverlightの開発チームを統率する氏のブログでは、次期製品を含む最新の技術をいち早く紹介しています。

目次

 原典:Announcing General Availability of HDInsight on Linux + new Data Lake Services and Language

はじめに

 今回、Linux上のHDInsightの一般公開とAzure Data Lakeおよび言語サービスの導入を含め、Azure上のビックデータサービスにおいてキーとなる機能をいくつか追加しました。

Linux上HDInsightの一般公開

 今回、Ubuntu Linux上HDInsightサービスを一般公開しました。HDInsightにより、クラウドで管理するHadoopクラスタを簡単に実行できます。今回のリリースで、Windows ServerオペレーティングシステムだけでなくLinuxオペレーティングシステムベースのUbuntuでも実行できるようにクラスタを設定できます。

 Linux上HDInsightにより、Hadoopワークロードを実行するためのツールやアプリケーションの選択肢がさらに増え、HadoopエコシステムパートナーはHDInsightで実行する際、さらに幅広いサポートが受けられるようになりました。HDInsightのLinuxおよびWindowsクラスタは、同じ基準のHadoopディストリビューション上に構築されており、同じリッチな機能一式が提供されます。

 今回の新しいリリースには、クラスタスケーリング仮想ネットワーク統合スクリプトアクションサポートなどの追加機能も含まれています。さらに、Hadoopクラスタタイプに加え、NoSQLやIoTアプリケーション構築などのリアルタイム処理のニーズに対して、Linux上のHBaseStormクラスタを作成できるようになりました。

クラスタの作成

 Linuxを使用して実行しているHDInsightクラスタは、Data + Analyticsセクション下にあるAzure管理ポータルから簡単に作成できます。クラスタオペレーティングシステムのドロップダウンからUbuntuを選択する、また必要に応じて作成したいクラスタタイプを選択するだけです(ベースのHadoopだけでなく、Storm、Spark、HBaseなどのワークロードに対して事前設定されたクラスタもサポートしています)。

 すべてのHDInsight Linuxクラスタは、Apache Ambariで管理できます。Ambariは、クラスタの性能および状態の統一ビューやHDInsightクラスタ内のモニタリングおよびアラート機能を提供すると同時に、Hadoopクラスタ構成設定のカスタマイズ機能も提供しています。

追加アプリケーションとのHadoopコンポーネントのインストール

 HDInsight Windowsクラスタと同様に、デフォルトHDInsightデプロイメントには含まれていないアプリケーションやHadoopコンポーネントを追加インストールすることで、Linuxクラスタをカスタマイズできます。これは、Script Action機能とBashスクリプト使用すれば達成可能です。例えば、HDInsight Linuxクラスタ上でHueをインストールし、それを簡単にワークロードで使用できます。

使い慣れたツールで開発

 すべてのHDInsight Linuxクラスタは、デフォルトでSSH接続が有効になっています。選択したSSHクライアント経由でクラスタに接続できます。さらに、SSHトンネリングで、ブラウザからすべてのHadoop Webアプリケーションにリモートアクセスできます。


  • LINEで送る
  • このエントリーをはてなブックマークに追加

著者プロフィール

  • WINGSプロジェクト Chica(チカ)

    <WINGSプロジェクトについて> 有限会社 WINGSプロジェクトが運営する、テクニカル執筆コミュニティ(代表 山田祥寛)。主にWeb開発分野の書籍/記事執筆、翻訳、講演等を幅広く手がける。2017年5月時点での登録メンバは52名で、現在も執筆メンバを募集中。興味のある方は、どしどし応募頂き...

バックナンバー

連載:Scott Guthrie氏 Blog翻訳

もっと読む

All contents copyright © 2005-2017 Shoeisha Co., Ltd. All rights reserved. ver.1.5