NTTデータのOSSソリューション

ビッグデータ活用を支える大量データ処理基盤を提供

NTTデータのOSSソリューションとは

オープンソースの分散処理基盤Apache Hadoop、Apache Spark、Apache Kafkaなどによる大量データ処理システムの構築・運用サービスです。他社に先駆けてこれまでに培ってきたHadoopおよびSpark、Kafkaに関するノウハウをもとに、コンサルティングから構築・サポートサービスの提供まで幅広く対応します。

ウェビナー

NTT DATA Tech

NTTデータから技術やその活用情報を中心に発信しているYouTubeチャンネルです。
技術革新統括本部やテクノロジーコンサルティング＆ソリューション分野のメンバを中心にお届けします。

詳細はこちら

NTTデータのOSSソリューションの特長

NTTデータでは、2008年よりHadoopへの取り組みを進めており、数多くの構築・運用実績を有しています。培ったノウハウをもとに、業務システムや社会インフラにHadoop/Spark/Kafkaなどを安心して活用頂けるソリューションをご提供しています。BI/DWH領域で培ったデータ分析のノウハウとあわせてご提供することで、大量データの活用に向けたコンサルティングも行うことができます。

データを蓄積するところから、活用するところまでトータルに支援します

大規模データ活用は、単にHadoopを導入すれば実現できるわけではありません。データをHadoopにどのように蓄積するか、Hadoopエコシステムとの組み合わせ、Sparkなど他の並列分散処理技術との使い分けなど、考慮すべき事がたくさんあります。NTTデータは、それら全てをトータルにご支援します。

並列分散処理に長けた技術者が高速な大量データ処理を安定運用させます

NTTデータは他社に先駆けて2008年よりHadoopに取り組み、数台～千台規模のHadoop基盤の構築やペタバイト級のデータを扱う等、国内最大規模の構築・運用実績を保持しています。Hadoopの開発コミュニティでも活躍する技術者が、実システムで得られた豊富な知見をもってお客さまの大量データ処理を安定運用させます。

小さくはじめて、大きく育てる。PoCからはじめられます

並列分散処理のための特殊なサーバやストレージは不要です。小規模から始めて、必要な容量や処理性能に応じて拡張可能です。最近では商用システム導入前のPoCのご相談も増えています。何かございましたらお気軽にお問い合わせください。

Hadoop、Spark、Kafkaを利用した分散処理システムに強み

NTTデータでは、Hadoopをはじめとしたオープンソースソフトウェアを適切に組み合わせることで、最適な分散処理基盤を提供します。
例えば、メッセージングシステムとしてKafka、データの蓄積にHadoop、データの処理にSparkを利用し、基盤全体をカバーすることで、分散処理基盤を実現します。

データ生成元からFluentdやembulkで収集し、Kafkaでメッセージング、Sparkで処理、HadoopやPostgreSQLに格納し、APサーバやクライアントに連携するデータ処理基盤の構成図

NTTデータのソリューション

NTTデータは、大規模データの活用にHadoopを利用した、分散処理のアプローチで多くの実績があります。
従来は夜間時間帯で実行していたバッチ処理を高速化することで、より早く情報を活用できる機会を創りました。
また、機器の容量不足などにより数日間分で捨てていたデータを数か月～年単位で保存することで、分析の精度を高めることができるようになりました。
実現したいことに応じて、数台～千台規模のサーバーからなるHadoopシステムを導入するなどの実績がございます。加えて、データの活用シーンに応じてさまざまな分散処理環境を提供してきた実績もございます。そして、数年以上のHadoopシステム運用で得られたノウハウを蓄積しています。

分散処理技術Hadoopについてはこちら