ウルシステムズ、基幹バッチ用HadoopフレームワークをOSS化

Hadoopは、米グーグルの並列プログラミングモデル「MapReduce」と分散ファイルシステム「Google File System」を模した分散バッチ処理ソフト。I/O処理を複数台のサーバーで分散処理することで、バッチ処理の速度を大幅に高速化できる。

Hadoopのプログラムは、プログラミング言語のJavaを使い、「Map処理」と「Reduce処理」というMapReduce独特の機構を組み合わせて開発する必要がある。そのため、分散処理に不慣れなプログラマーにとって敷居が高かった。ウルシステムズが開発したAsakusa Frameworkは、同社独自のDSL(ドメイン特化言語)を使って開発したプログラムから、MapReduce用のプログラムを自動生成する。プログラマーはAsakusa Frameworkを使うことで、MapReduce独特の機構を意識せずに基幹バッチ処理を開発できるようになる。

Asakusa Frameworkは、DSLを使って開発したプログラムからMapReduceプログラムを生成する「MapReduceコンパイラ(Ashigelコンパイラ)」や、「MySQL」からデータを取り出すプログラムを自動生成する「モデルジェネレーター」、バッチジョブの実行監視を行い、障害が発生した場合に処理をやり直す運用管理機能、テストコードの自動生成機能などを備える。

ウルシステムズは既に、Asakusa Frameworkを使った流通業向け基幹システムの開発を進めており、間もなく第一号システムがカットオーバーする予定。Asakusa Frameworkを使用することで、従来4時間かかっていたバッチ処理が、数分で完了したという実績もあるという。

MapReduceプログラムを自動生成するフレームワークとしては、Asakusa Framework以外にも、米フェイスブックが開発した「Hive」や米ヤフーが開発した「Pig」などがあり、HiveやPigではSQLに似た構文でプログラムを開発できる。HiveやPigがデータウエアハウス(DWH)用途やビジネスインテリジェンス(BI)用途で使われているのに対して、 Asakusa Frameworkは基幹バッチ処理に特化しているところに違いがある。

2011年 2月9日
Itpro

ウルシステムズ
クライアント企業ビジネスの成功をITで支援するコンサルティングサービスと、ビジネス革新を支える日本発のソフトウェアソリューションを提供しています。また、ソフトウェアベンダーや高い技術力を持つSIerとの積極的な協業やアライアンスを推進しており、クラウドコンサルティングやスマートフォンコンサルティングなど、新規分野への参入も積極的に行っています。また方法論やフレームワークの構築をはじめ、独自のソフトウェア開発まで行っています。

ウルシステムズについて

コンサルティング業界の最新ニュースをお伝えします。最先端の業界で何がどう動いているのかをWatchすることで、広くビジネス界全体の今後の動きを展望することができるはずです。

ニュース検索はこちらから 

初めての方へ

プライスウォーターハウスクーパース・ストラテジー(Strategy&) 第二新卒セミナー PwCコンサルティングの戦略コンサルティング部門(Strategy&)は、この度、社会人経験3年以下程度の第二新卒の方を対象にしたセミナーを開催いたします!

ベイン・アンド・カンパニー キャリアセミナー 現役コンサルタントによるパネルディスカッションのほか、会社紹介、希望者を対象に選考会を実施致します。

「キャリアを考える。」夏季特別プライベート相談会 売り手市場で広き門に。求人が多い状況、だからこそ立ち止まって考える必要があります。

P&G 企業相談セミナー 人気のあるマーケティングポジションの採用ニーズなどP&G出身者のキャリアコンサルタントがお答えします!

	戦略コンサルタントへの転職 キャリア相談会 戦略コンサルタントになるために必要なことなど意見交換・ご相談をさせて頂きます。

「事業会社企画職からのコンサルティングファームへの転職」個別キャリア相談会 事業会社において経営企画やマーケティングなどの企画職に従事されていらっしゃる皆様で、コンサルタント職にご興味をお持ちの方へ

出身大学別 キャリア相談会 20代、30代の東大・東工大・一橋・慶應・早稲田大学出身者の方々のための今後のキャリアについての個別相談会を随時開催しています。

キャリア相談会のご案内 今後のキャリアについてのご相談や、コンサルティング業界についての個別説明会を随時実施しています

その他セミナー一覧はこちらから

メールマガジン

戦略コンサルティングファーム スペシャルインタビュー 戦略ファーム各社のコンサルティング内容や求める人材像などお話を伺って参りました。

理想のキャリアを手に入れるために全力でご支援させて頂きます

ムービンでは今すぐのご転職でなくても、今後のキャリア形成や、ご転職に向けての中長期的なプランを共に考え、具体的なアドバイスをさせて頂いております。コンサルティング業界にご興味のある方はご自身では気づかれない可能性を見つけるためにも是非一度ご相談ください。

無料転職支援・ご登録はこちらから

無料転職相談はこちらから

Page Top

無料転職相談・登録

コンサルタントへ転職をお考えの方、コンサルタントから転職をお考えの方に、コンサルティング業界転職支援実績No.1の人材紹介会社、株式会社ムービンが圧倒的な業界知識を提供する転職支援サイトです。弊社キャリアコンサルタントはコンサルティング業界出身であるためコンサル経験者にしか出来ない転職コンサルティングを致します。キャリアチェンジをお考えの方はぜひ一度我々にご相談ください。

ムービングループサイト

  • コンサルタント転職サイトコンサル業界への、コンサルからの転職支援。
  • ITコンサルタント転職サイトITコンサルティング業界への転職支援
  • 金融転職サイトファンド、M&Aなどの金融業界への転職支援
  • 組織人事コンサルタント転職サイト人事コンサル、事業会社人事ポジションへの転職支援
  • エグゼクティブ転職サイトエグゼクティブ層への転職支援

株式会社ムービン・ストラテジック・キャリア
Copyright (c) movin CO .,Ltd. All rights reserved.

コンサルタントとは?

そもそもコンサルタントとはどんな職業で、どんな仕事をしているのでしょうか

皆様からよく頂くご質問

弊社にご登録いただき、ご面談した方からよく頂くご質問をまとめてみました。

今後のキャリア形成について

どんなキャリアがあるのか、今後のキャリア形成をどうすればいいのか、いつでもご相談してください

コンサルタントになるために

コンサルタント転職は難しい。コンサルタントになるために必要なことをご紹介いたします

お問い合わせ、ご相談はこちらから。すべて無料となっております。

Copyright (c) movin CO .,Ltd. All rights reserved.

初めての方へ   無料転職相談・登録

Page Top