http://developers.microad.co.jp/entry/2018/05/24/131136
こんにちは。インフラエンジニアの@kanga333です。
最近マイクロアドではデータ基盤を刷新しました。
今回はデータ基盤の刷新に至る背景と新基盤での設計ポイントについてざっくり書いていきたいと思います。
刷新に至る背景
マイクロアドを長年支えてきた既存データ基盤は長年の改修の結果、色々な課題を抱えていました...
Hadoop 2 がリリースされた : MapReduce から YARN へ移行 | Agile Cat --- in the cloudPosted in .Selected, Apache, Big Data, Google, Hadoop, MapReduce by Agile Cat on October 17, 2013 Apache Software Foundation unveils Hadoop 2, replacing MapReduce with YARN http://wp.me/pwo1E-6MQ Loek... |
MapR アーキテクチャ概要 - MapR CTO Meetup 2013/11/12MapR アーキテクチャ概要 - MapR CTO Meetup 2013/11/12 Presentation Transcript ! ! M.!C.!Srivas,!CTO/Co0founder! 1 " ! ! " – "Map'Reduce,"Bigtable" " ! – " Netapp" " ! AFS" – "AFS" – " " " " 2 " MapR! ! Hadoo... |
Cloudera World Tokyo 2013に参加してきました #cwt2013 | Developers.IOCloudera World Tokyo 2013に参加してきました。 http://www.cloudera.co.jp/jpevents/cwt2013/index.html 午前中は用事があったので午後からの参加となりました。参加したのは以下のセッションです。 13時30分〜14時10分 CDH最新情報 14時25分〜15時05分 Hadoopデータプラットフォーム 15時30分〜16時10... |
Hadoop初のメージャーバージョンアップ「Hadoop 2」正式版が公開。MapReduce以外の分散処理フレームワークも実行可能に - PublickeyThe Apache Software Foundationは、Hadoopの初めてのメジャーバージョンアップとなる「Apache Hadoop 2」の正式版公開を発表しました。 Hadoopは2004年にGoogleが公開したMapReduceに関する論文を元にオープンソースとして開発されたものでした。Hadoopの開発者であるダグ・カッティング氏は、Hadoop 2のプレスリリースで次のように... |
ニュース - 日立がCOBOLデータ向けHadoopアプライアンス:ITpro日立製作所は2013年10月15日、COBOLデータをOSSの分散処理ソフト「Apache Hadoop」で活用する「かんたんHadoopソリューション for COBOL基幹データ活用」を、10月17日に販売開始すると発表した(写真)。取引履歴や販売実績など、基幹系のビッグデータ分析が主なターゲットである。 同社のブレードサーバー「HA8000-bd/BD10」に、Hadoopや「COBOL20... |