Apple quietly joins ranks of Hadoop users
Like Yahoo, Facebook, and Twitter, Apple embraces open source, data-crunching framework for mobile ads business
DECEMBER 02, 2010
http://www.infoworld.com/t/development-platforms/apple-quietly-joins-ranks-hadoop-users-400?source=footer
Whether or not Hadoop fits Steve Jobs’s definition of "open source," Apple appears to be embracing the increasingly popular framework, built for supporting data-intensive distributed applications.
Steve Jobs のオープンソース定義に、Hadoop が入る入らないは別にして、 データ･インテンシブな分散アプリケーションをサポートするために構築され、ますます注目度を高めているこのフレームワークを、Apple は受け入れるようだ。
A job posting from Apple indicates that the company is seeking a senior engineer schooled in Hadoop to "design and build [a] scalable Hadoop based ETL infrastructure" for its mobile-advertising program, iAds, as first reported on The Register.
Apple からの求人が示すのは、Hadoop を学んだシニア･エンジニアを、同社が探していることである。そして、最初に The Register でレポートされたように、モバイル広告のプログラムである iAds のために、Hadoop ベースの スケーラブルな ETL インフラストラクチャを設計し、構築して欲しいと望んでいる。
Hadoop is already drawing attention from enterprises across various industries for its ability to house and analyze vast amounts of data over distributed computing environments — aka the cloud. The framework uses MapReduce to spread out the data processing over a massive numbers of servers, then combines the results. Observers have declared Hadoop a killer application for the cloud.
Hadoop は、クラウドとして認識される分散コンピューティング環境上で、膨大なデータを収容／分析する能力を持つため、各種の産業に広がるエンタープライズの注意を、すでに引きつけている。 そのフレームワークが用いる MapReduce により、データ処理が大量のサーバーに分散され、また、その結果が結合される。 クラウドを観察する人々は、Hadoop をキラー･アプリケーションだと宣言している。
Among the high-profile users of Hadoop is Yahoo, which has enhanced the platform to prep it for business intelligence applications in the enterprise. The company has an M45 cluster build on Hadoop, which spans 4,000 processors and 1.5 petabytes of disk space.
Hadoop を高度に活用するユーザーには Yahoo がいて、エンタープライズの BI アプリケーションに適合させるために、そのプラットフォームを拡張している。 同社には、4,000のプロセッサにまたがり、1.5 ペタバイトのディスク･スペースを有する Hadoop の、M45 クラスタが存在する。
Yahoo’s application of Hadoop has already made a mark in the world of research and academia: The company has opened up the facility for big data research to eight universities across the United States. Recently, a team of Yahoo researchers used the company cloud to set a new record in the field of mathematics by creating the longest version of pi to date.
Yahoo の Hadoop アプリケーションは、研究と学術の世界で、すでに記録を作っている。 つまり、同社は、全米の 8 大学で Big Data を研究するための、ファシリティを開放している。 最近になって、Yahoo 研究チームが取り組んでいるのは、かつて無い規模の円周率計算を、同社のクラウドを用いて実施し、数学の世界で記録を達成することだ。
Other users include eBay, which is building an 8,500-processor 16-petabyte Hadoop cluster; the New York Times, which uses the platform for tasks such as batch processing of huge volumes of image data, as well as text analytics and data mining; and social media sites such as Facebook and Twitter.
eBay のケースでは、8,500プロセッサと 16 ペタバイトの Hadoop クラスタが構築されている。New York Times では、大量のイメージ･データに加えて、テキスト分析や、データ･マイニングのためのバッチ処理として、このプラットフォームを機能させている。そして、Facebook や Twitter などの、ソーシャル･メディアも同様である。
Hadoop’s adoption in the enterprise can be attributed in part to the fact that IT companies such as Yahoo have been steadily grooming the platform for corporations. IBM last May announced a new portfolio of BI solutions and services built on Hadoop called IBM InfoSphere BigInsights. Additionally, Informatica announced last month that it had modified its business intelligence software to work with Cloudera’s Hadoop distribution. Also this year, Cloudera and Quest announced Ora-Oop,free software for connecting Hadoop to Oracle databases.
それらの エンタープライズにおける Hadoop の適用は、Yahoo などの IT 企業が、これまで着実にプラットフォームを準備してきたという、事実の一部として捉えられる。 この 5月には IBM が、IBM InfoSphere BigInsights という Hadoop 上に構成された、BI ソリューションの新しいポートフォリオとサービスを発表している。 さらに、先月には Informatica が、Cloudera の Hadoop ディストリビューションと協調するように、同社の BI ソフトウェアを修正したと発表した。 そして、Cloudera と Quest は、Oracle データベースとHadoop を接続するための、フリーソフトである Ora-Oop 発表している。
This article, "Apple quietly joins ranks of Hadoop users," was originally published at InfoWorld.com. Get the first word on what the important tech news really means with the InfoWorld Tech Watch blog.
ーーーーー
とにかく、メデタイです！ ようこそ Apple さんと言いたいです！ 例の、新しいデータセンターでは、Hadoop がガンガン走るんでしょうね。。。 それにしても、この記事、いつになったら Apple の話に戻るのかと訳していたら、そのまま終わってしまった orz。 でも、まぁ、今年は Hadoop World に行かなかったので、自分なりにまとめができて、良かったと思うことにします。ーーー A.C.
ーーーーー
＜関連＞
Karmasphere Studio は、Windows にも対応する フリーの Hadoop 開発環境
Hadoop World 2010 の ビデオと PPT
Hadoop World: Cloudera は Big Data Friends を得たが ・・・
MapReduce と Hadoop の将来について
Big Data と LAMP Stack
Avro による分散システムのトレース
