Copyright © 2013 Splunk, Inc.

ビッグデータ先進国、米国での活用事例

Splunk Services Japan 合同会社

Channel Sales Manager

須田 孝雄 (tsuda@splunk.com)

会社概要 会社

• 2004年設立, 2006年に最初のソフトウェアリリース

• 本社: カリフォルニア州、サンフランシスコ市

• 支社：香港、ロンドン

• 社員数、約860名（12カ国）

• NASDAQ SPLK

財務

• レベニュー: 2012年度、198Mドル

6400 以上の顧客

• 90ヵ国以上にわたって6,400以上の顧客

• フォーチュン100のうち60+の顧客

• 最大規模顧客：100TB/日

2

業界での認知

Big Data Innovator 2013 SIEM Magic Quadrant

LEADER 2012 Security Market Growth

#1 Worldwide

2012 IT Operations Market Growth

#3 Worldwide

Best SIEM North America

Best Enterprise Security Solution EMEA

#1

Most Innovative #4

3

4

マシンデータを、すべて人に、 アクセス可能に、便利なものに、そして価値あるものに。

Make machine data accessible, usable and valuable to everyone.

4

加速するデータの変化

量(Volume) | 増加速度（Velocity） | 種類 （Variety） | 変化（Variability）

GPS, RFID,

Hypervisor, Web Servers,

Email, Messaging, Clickstreams, Mobile,

Telephony, IVR, Databases, Sensors, Telematics, Storage,

Servers, Security Devices, Desktops

マシンデータはBig Dataの中でも急速に成長し、複雑で、価値のあるエリア。

5

マシンデータ Sources

Order Processing

Twitter

Care IVR

Middleware Error

6

マシンデータは、重要な情報を含んでいる Customer ID Order ID

Customer’s Tweet

Time Waiting On Hold

Twitter ID

Product ID

Company’s Twitter ID

Customer ID Order ID

Customer ID

Sources

Order Processing

Twitter

Care IVR

Middleware Error

7

マシンデータは、重要な情報を含んでいる Order ID

Customer’s Tweet

Time Waiting On Hold

Product ID

Company’s Twitter ID

Order ID

Customer ID

Twitter ID

Customer ID

Customer ID

Sources

Order Processing

Twitter

Care IVR

Middleware Error

8

業界をリードするマシンデータ向けプラットフォーム

様々なマシンデータ オペレーショナル インテリジェンス

HA インデックス、 ストレージ

サーチ 調査

プロアクティブ モニタリング

運用の可視化 リアルタイム ビジネス洞察

汎用的な サーバ

Online Services Web

Services

Servers Security GPS

Location

Storage Desktops

Networks

Packaged Applications

Custom Applications Messaging

Telecoms Online

Shopping Cart

Web Clickstreams

Databases

Energy Meters

Call Detail Records

Smartphones and Devices

RFID

9

時系列（タイムスタンプ）

アスキー（テキスト形式）

10

業界をリードするマシンデータ向けプラットフォーム

様々なマシンデータ オペレーショナル インテリジェンス

HA インデックス、 ストレージ

サーチ 調査

プロアクティブ モニタリング

運用の可視化 リアルタイム ビジネス洞察

汎用的な サーバ

Online Services Web

Services

Servers Security GPS

Location

Storage Desktops

Networks

Packaged Applications

Custom Applications Messaging

Telecoms Online

Shopping Cart

Web Clickstream

s

Databases

Energy Meters

Call Detail Records

Smartphones and Devices

RFID

量、場所、位置を問わず

事前の スキーマ定義

が不要

ログの分散保持が可能

バックエンドにRDBMSが

不要

データの フィルターが

不要

11

マシンデータからオペレーショナルインテリジェンスへ

リアクティブ

サーチ 調査

プロアクティブモニタリング

オペレーションの

見える化

プロアクティブ リアルタイムビジネス洞察

12

IT 運用管理 インダストリアルデータ、Internet of things

IT・ビジネスユーザ向けオペレーショナルインテリジェンス

デジタルインテリジェンス

ビジネス分析

アプリケーション管理

LOB Owners/ Executives

System Administrator

Operations Teams

Security Analysts

IT Executives

Application Developers

Auditors Website/Business

Analysts Customer Support

セキュリティ コンプライアンス

13

オペレーショナル インテリジェンスのスタンダード

エンジン プラットフォーム 1 2 3

2006-2008

ツール

2009-2011

2012-2013

4 4.1 4.2 4.3 5 6

“データセンター内を検索するエンジン

(=Google)

“マシンデータの 分析エンジン”

“オペレーショナルインテリジェンスのプラットフォーム”

14

アプリケーションマネジメント

セキュリティ IT

オペレーション

デベロッパ プラットフォーム (REST API, SDKs)

ビジネス 分析

インダストリアル データ

Internet of

Things

Small Data. Big Data. Huge Data.

SplunkはITとビジネスへ価値を提供します

15

Splunk プラットフォーム

収集

インデックス化

サーチ処理言語（SPL)

コア ファンクション

入力、アプリケーション、 その他コンテンツ

SDK

オペレーショナルインテリジェンス プラットフォーム

コンテンツ

コアエンジン

ユーザ＆開発者 インターフェイス

Web Framework

REST API

16

豊富なSplunk Apps（アプリケーション） Splunk Appsサイトで400種類以上のアプリケーションが利用可能

REST API

XenApp XenDesktop

サーバ、ストレージ、ネットワーク

サーバ仮想化 OS インフラ

アプリケーション モバイル

アプリケーション クラウド サービス

その他・監視 トラブルチケット ヘルプデスク

独自・ビジネス アプリケーション

SDKs

Web Framework

17

多くの組織がHadoopを利用し始めている Hadoopの導入と活用のチャレンジ

• 20倍ものリソースが実装に必要

• Big Data分析に必要な スキルが不足

• 13以上ものHadoop関連 プロジェクトの統合が必要

• データは大きすぎて 動かせない Hadoop

(MapReduce & HDFS)

YARN Ambari Avr

o

Cassandra

Chukwa

H i v e

HBase Mahout

Pig

ZooKeeper

13+ Hadoop-related Projects

18

Hunk: Splunk Analytics for Hadoop

完全に統合された製品

全てのユーザへ

インサイトを

様々なHadoopディストリビューションとの連携

Hadoopデータの相互利用、探索、分析、 可視化を実現

組織内の幅広いユーザがHadoop内の生データを様々な視点で活用

業界をリードしている主なディストリビューションと連携し、投資効果を向上

Hadoop ストレージ

検索 分析 可視化 ダッシュボード 共有

19

Hunk Splunk Enterprise

ITディレクタ、IT運用管理者、 セキュリティ担当者、システム管理者、 開発者、サポート担当者

運用監視、アプリケーション管理、セキュリティ、ディジタルインテリジェンス用途での、サーチ、監視、時系列のオペレーショナルデータ

ビジネスユーザ、データアナリスト、データアーキテクト、 データサイエンティスト、開発者

バッチ分析、ファネル分析、 長期レポーティング、 アプリケーション（カスタムレポーティング）

マシーンデータ向けPlatform、 オペレーショナルインテリジェンス

Hadoop内のデータに対する、 検索、分析、可視化

誰が?

何を?

どのように?

20

米国での 先進活用事例

21

Healthcare

Technology

Energy and Utilities

Manufacturing

Telecommunications

Government

Retail

Financial Services and Insurance

Media

Travel and Leisure

90カ国以上、6400以上のお客様

Cloud and Online Services Education

22

ビジネス全体の オペレーショナルインテリジェンス

統合ダッシュボード ‘パネル毎に’ サービス全体の

クラウド環境 を見える化

改善 96%のトラブルシューティング

改善 アプリケーションパフォーマンス

よりよいユーザ体験 １０万社以上の顧客

23

広い範囲でお客様の動向を理解

ウェブログ トラフィックデータ

7億5000万

ウェブユーザ 1200万

クリックストリーム

/１ヶ月 クエリー / １ヶ月

維持 高いパフォーマンス

防御 悪意のあるBotなどから

分析 広告主の情報を検知

24

モニター 基地局 主要な 災害を検知

ビジネス事象の洞察と分析

相関分析 CDRsとトラフィックデータ

リアルタイム 可視化 ヘビーユーザーや悪用ユーザーの検知

識別 最小コストのルート

25

プロアクティブなセキュリティ監視とフォレンジクス

セントラルビュー ユーザーアクティビティー, システム 全体

プロアクティブ セキュリティ脅威のアセスメント

Cisco CSIRT Security Investigation Interface

インシデント 傾向検知とアラートなどに よる周知

26

セキュリティ

コンプライアンス

ITオペレーション

アプリケーションマネージメント

ITサイロを横断的に、不正検知

我々は Splunk で

素早く、自動的に, 不正を改善

安全にビジネスを 実行できるEtsyを 構築しました

“ “

+

Nick Galbreath

ニックガルブレス Director of Engineering

エンジニアリング ディレクター

27

共通運用基盤のリアルタイム洞察

マシンデータ エンドツーエンド

サービス デリバリー システム

90% コスト削減 エスカレーション

67% 早く 問題解決

顧客満足度の飛躍的な向上

28

Splunkによる更なる省力化

セントラルビュー 電力使用状況

相関分析 複数のビルディングシステムから

McKenney’s Business Intelligence for Buildings

最適化 設備や使用状況

29

ROI – 多種多様な変化に、迅速に、柔軟に対応

収益の増大

システムの継続性

生産性の向上

コスト削減

セキュリティリスクの低減

サービスの最適化

Macys.com 自社のeコマースのインフラをプロアクティブに監視・分析 数ヶ月かかったダッシュボード作成を1ヶ月かからず実装。Splunkでシステム全体を見通す事ができるようになり、100%の稼働時間を達成。全IT部門で100ユーザー 以上が、役割毎にダッシュボードを作成して管理。インシデントあたり3000万円のチャンスロスを回避。

TransUnion 自社のインフラをプロアクティブに監視・分析 システムのダウンタイムを90%改善。サービス(信用情報管理)の品質が向上し、 収益upを実現。 HealthTrans 問い合わせから問題を特定するまで(ユーザトランズアクション調査)に7,8時間 かかっていたものを5分で解決。

Large mutual fund コンプライアンス用途でSplunkを使用 コンプライアンスレポートの作業が効率化。1ヶ月で費用回収ができた。

Large telecoms company セキュリティ監視に使用 不正アクセス検知などセキュリティ脅威に対する監視と対応プランの作成、 問題の傾向把握などが実現し、投資効果を1ヶ月で実現。

Top five US wireless carrier ARPU増とコスト削減につながるCDR分析 提携するキャリアの中から最安料金となるルーテリングを選択し接続。 提携キャリアのパートナーシップを強化し、サービス品質を向上。

30

400+ を超えるAppsの提供 24,000+ Communityでの

Q&A (日本語対応)

毎週3,000+ を超える訪問者

(dev.splunk.com)

日本ユーザグループ SplunkLive! Japanイベント

年次ユーザカンファレンス

グローバルでのユーザコミュニティ

Splunkデベロッパ Splunk Apps & Answers

31

本日より、さっそくご利用ください 日立ソリューションズ様のサイトから

ダウンロードしてからインストール完了まで数分です。

3. Splunkの利用を開始 1. ダウンロード 2. マシンデータのインデックス

http://www.hitachi-solutions.co.jp/splunk/

32

ありがとうございました