Day、DataTechという、3つのイベントを開催しております。それぞれ編集部独自の切り口で、業界トレンドや最新事例を網羅。最新の動向を知ることができる場として、好評を得ています。Academy」や、すべてのITパーソンに向けた「新エバンジェリスト養成講座」などの講座を企画しています。EnterpriseZine編集部ならではの切り口・企画・講師セレクトで、明日を担うIT人材の育成をミッションに展開しております。市場を勝ち抜く企業はどこにIT部門から“組織変革”を~気鋭のトップランナーを訪ねる~EnterpriseZine編集部が最旬ITトピックの深層に迫る。ここでしか読めない、エンタープライズITの最新トピックをお届けします。Japanのトップページを参照することが多い。ニュースでピックアップされると、ニュースサイトへのアクセスが一気に増える。その影響は、依然としてかなり大きい。Japanには100を超えるサービスがある。登録会員数は2,000万を超え、1日に9,100万ものユニークビジター・アクセスがある。Japanでは日々膨大なデータが生まれている。Webサイトやアプリケーションには1日に約610億ものリクエストが発生、そこから日々125テラバイトを越えるデータが生成される。Japanのビジネスを最適化し、利用者の利便性の向上に使われる。Japanがデータウェアハウスを構築したのは、2002年のことだった。当時のデータ量は6テラバイトほど、分析スキルの高いユーザーにのみアドホック分析の環境が公開された。Japanのデータウェアハウスは徐々に成長する。2016年には扱うデータ量は1.7ペタバイトにまで拡大、ユーザーからのデータ処理リクエストは、1日に30万クエリーにもなった。2018年には、データウェアハウスは3.3ペタバイト規模に拡大、1日当たりのクエリー数は100万を超える。Japanの極めて大規模なデータウェアハウスは、主に2つのテラデータのシステムで構築されている。データレイクとして、大規模なHadoopクラスターシステムも運用している。Japanのデータウェアハウスについてブレークアウトセッションで解説した。Teradata)で構築されているデータウェアハウスは「SQLさえ憶えれば、エンジニアではなくても誰でも使える環境です」と語る。Japanには、SQLを書きデータウェアハウスから必要なデータを分析・抽出できるスキルを持つユーザーが1,000人ほどいる。TableauなどのBIツールを使いアクセスするユーザーも1,000人ほど、合わせて2,000人強のユーザーがTeradataのデータウェアハウスを活用している。一方でデータレイクとなっているHadoopのクラスター環境は「すべてのデータの受け皿という位置づけになります」と櫻井氏。Teradataに全てのデータを蓄積するとコストも上がる。Hadoopならば、同じコストで何10倍ものデータを置くことができる。そのため、日々大量に発生するログデータを最初に置くのが、Hadoopのシステムになっているのだ。Japanにとって、データレイクを効率的に運用することは最大の課題だ。「スケールすることが非常に重要です。いえHadoopは、巨大で拡張性のあるストレージとして利用しているだけではない。Hadoopの環境には分散処理のHive、SparkやPrestoといった多様なクエリーエンジンがあり「ストレージとしてだけでなく、コンピューティングでもあり、データ処理を適材適所で行っています。JapanにとってHadoopは大切なものの1つです」と櫻井氏は言う。チーフキュレーターかつてAI、エキスパートシステムが流行っていたころに、開発エンジニアとしてIT業界に。その後UNIXの専門雑誌の編集者を経て、外資系ソフトウェアベンダーの製品マーケティング、広告、広報などの業務を経験。Day、DataTechという、3つのイベントを開催しております。それぞれ編集部独自の切り口で、業界トレンドや最新事例を網羅。NEW新着記事一覧を見るイベントイベントカレンダーを見る講座イベントカレンダーを見る「EnterpriseZine」(エンタープライズジン)は、翔泳社が運営する企業のIT活用とビジネス成長を支援するITリーダー向け専門メディアです。データテクノロジー/情報セキュリティ/システム運用の最新動向を中心に、企業ITに関する多様な情報をお届けしています。イラストの無断転載を禁じます。記載されているロゴ、システム名、製品名は各社及び商標権者の登録商標あるいは商標です。