データサイエンス X アジャイル開発

データサイエンス X アジャイル開発
2014年5月30日
Pivotalジャパン株式会社
テクニカルディレクター
仲田 聰
© Copyright 2014 Pivotal. All rights reserved.
1
次世代エンタープライズ・プラットフォーム
Pivotal 始動 (2013年4月1日)
日本法人Pivotalジャパン(株)2013年8月業務開始
CEO ポール・マリッツ
従業員数
1,900人
企業顧客
1,000社以上
売上規模 (計画)
出資比率
2013年3億ドル
2017年10億ドル © Copyright 2014 Pivotal. All rights reserved.
2
Industrial Internetを支えるGEの3rd Platform
Pivotal Japan Summit 2013 におけるGE SWセンター
CMO John Magee氏 講演資料より抜粋 © Copyright 2014 Pivotal. All rights reserved.
モバイル ソーシャル
ビッグデータ クラウド
3
Pivotalミッション
エンタープライズのお客様も、Google, Amazon,Facebookと同様に・・・
自ら膨大なデータを収集・分析し、早いスピードで市場に対応する
戦略アプリケーションの投入がビジネス競争上必須になる !!
エンタープライズのお客様の
コンシューマ・グレイド•エンタープライズ
へのイノベーションを支援
© Copyright 2014 Pivotal. All rights reserved.
4
コンシューマ・グレイド•エンタープライズ
を支える2本の柱 コンシューマ・グレイド•エンタープライズ
アジャイル開発
© Copyright 2014 Pivotal. All rights reserved.
データサイエンス
5
データサイエンス・サービス Pivotal Data Labs
全世界で約60名の各領域の専門家を有する
Pivotalデータサイエンティストがシステム・アー
キテクトとチームでお客様を支援
§ データ・サイエンスの戦略立案支援
§ 検証用の分析モデル構築
§ 分析モデルとアプリケーションの構築
§ データ・サイエンティスト・イノベーション・セン
ター設立の支援 (予測型経営への移行支援)
§ ビッグデータ分析基盤のアーキテクチャ策定
その他、アルゴリズム開発、課題解決支援など
© Copyright 2014 Pivotal. All rights reserved.
6
事例1)カスタマーサポート分析
Customer
Solution
大手健康保険会社
§  ロジスティック回帰モデルを構築し、顧客が必要な情報
をウェブサイト上でみつけられるか否かを予測すること
が可能になった。
Business Problem
Ÿ  コールセンターへの問い合わせがこの企業にとって無視で §  電話の通話ログからトピックモデルを作成し、問い合わ
きないコストに増加(1件につき$7)
せ内容の傾向分析を可能にした(問合せ内容=顧客が
Ÿ  これまで既存顧客への接触を積極的に行ってこなかった。 ウェブサイト上で見つけられなかった情報)
Ÿ  まずは顧客が「ウェブサイトではなくコールセンターを利用
する場合」はどういう場合なのかを解明したい
Challenges
§  コールセンターのコールログ、オペレーターのコールメモを
使用するため、構造化されていないテキストデータにかなり
の前処理が必要であった。
© Copyright 2014 Pivotal. All rights reserved.
7
事例2)ネットワーク上のユーザーの異常行動検知
Customer
Solution
Business Problem
Ÿ  機械学習を取り入れたグラフマイニングを用い、
ネットワークトポロジーと行動の時系列分析をモデ
ル化(特許申請中)。
国際的企業のコンピューターネットワーク上の
異常なユーザーの行動を検知する
Ÿ  パラレルモデルトレーニングと行動リスクのスコアリ
ングを可能にし、異常行動を展開するユーザーを
特定することに成功。
大手国際金融サービス企業
Challenges
Ÿ  大容量のデータ(6ヶ月で1兆イベント、15000
を超えるネットワークデバイス)
Ÿ  SIEMソリューションでは多様なユーザーの行
動を全て把握するのは不可能。
© Copyright 2014 Pivotal. All rights reserved.
8
データサイエンス x アジャイル開発でビジネス効果を最大化
従来のDWH
データサイエンス
データサイエンスxアジャイル
効果の
大きさ
APPSでの施策推進能力
人間系での施策推進能力
人の分析能力
人間系での施策推進能力
人の分析能力
人間系での施策推進能力
人の分析能力
入手可能なデータ量
インフラの処理能力
© Copyright 2014 Pivotal. All rights reserved.
入手可能なデータ量
ビッグデータ、SNS / M2M
インフラの処理能力
APPSで入手可能なデータ
入手可能なデータ量
ビッグデータ、IoT,SNS / M2M。
インフラの処理能力
9
アジャイル開発支援サービス Pivotal Labs
• 
• 
1989年 創業
Lab 拠点
サンフランシスコ、パルアルト、ニューヨーク、
ロサンジェルス、ボストン、ボルダー、ロンドン、
トロント
•  従業員数 約500人
•  ウェブ、モバイル、クラウドサービス開発を支援
サービスの特徴
•  ウォークインサービス
•  ペア・プログラミング
お客様とPivotal Labs開発者のペアプログラミング
•  アジャイル開発
Ruby, JavaScript, Github
•  開発ツール
Pivotal Tracker(オープンソース)
© Copyright 2014 Pivotal. All rights reserved.
概要
10
“THE PIVOTAL LABS WAY”
協調的
透明性
厳しい規律
反復型
イネーブルメント
Pivotal Labs Confidential
© Copyright 2014 Pivotal. All rights reserved.
11
協調的
ペアープログラミング
Stand Up (朝礼) © Copyright 2014 Pivotal. All rights reserved.
12
透明性(Pivotal Tracker)
© Copyright 2014 Pivotal. All rights reserved.
13
エンゲージメントの流れ
スコーピング
インセプション
エンゲージメント
レトロスペクティブ
イネーブルメント
© Copyright 2014 Pivotal. All rights reserved.
14
スコーピング
イントロ
デザイン
ゴール
アクター
アクティビティ
リスクと統一作業
タイムライン
コスト
© Copyright 2014 Pivotal. All rights reserved.
15
インセプション
© Copyright 2014 Pivotal. All rights reserved.
16
顧客事例
© Copyright 2014 Pivotal. All rights reserved.
17
顧客事例(抜粋)
© Copyright 2014 Pivotal. All rights reserved.
複数プロジェクト。多リージョンにまた
がるメッセージングとその手法に関し
てのトレーニング、など
複数プロジェクトとアジャイル手法ト
レーニング
キャンペーンパフォーマンス計測の
ダッシュボード作成(どのチャネルから
の広告が使用されたかの測定)
B2B プリンタサブスクリプションサー
ビス。登録とビリング機能の提供。
B2B ポータル。eCommerce が Best
Buy のインベントリにアクセスできる基
盤の作成
モバイルでバイス対応
企業がその顧客から製品アイデアを
集めるための基盤作成
リアルタイムローカル取引およびメッ
セージング基盤作成
次世代クラウドコミュニケーション・
プロバイダー
iPad app that leverages Visa のデー
タを活用した中小企業向け分析(郵便
番号ごとのトップ顧客の分析、など)
iPad アプリケーション
18
Featuring highlights and news from around the league, play-by-play experience, scores, and
schedules, NBA Game Time has everything the diehard basketball fan wants to know.
© Copyright 2014 Pivotal. All rights reserved.
19
During our long-standing partnership with Facebook,
we have built Facebook Messenger for BBOS 5, 6, 7, and 10
© Copyright 2014 Pivotal. All rights reserved.
20
We worked with the NFL to build a mobile app that includes features such
as live scores, live streaming, news articles, statistics, fantasy leagues,
and links back to the NFL site for ticket sales.
© Copyright 2014 Pivotal. All rights reserved.
21
We worked with AmEx to prototype a virtual credit card solution for mobile.
This allows cardholders to use their smartphone to make purchases if
they are waiting to receive their credit card.
© Copyright 2014 Pivotal. All rights reserved.
22
Salesforce Meeter is an iPad app for capturing meeting notes and
automatically attaching them to a Salesforce opportunity, contact, or lead.
© Copyright 2014 Pivotal. All rights reserved.
23
Pivotalのソリューション・ポートフォリオ
アプリケーション
データサイエンス
データ
アジャイル開発
開発フレームワーク & OSS
ビッグデータ ファストデータ
PaaS基盤
プライベート・クラウド
© Copyright 2014 Pivotal. All rights reserved.
バーチャル・
プライベート・クラウド
パブリック・クラウド
24
Pivotalが推進する主要なオープンソースイニシアティブ
© Copyright 2014 Pivotal. All rights reserved.
25
HDFSをデータストアとした
Big & Fast Data基盤
Pivotal HD
ストリーム
インジェスチョン
Streaming Services
データステージング
プラットフォーム
Data Mgmt. Services
アナリティック
データマート
オペレーショナル
インテリジェンス
ランタイム
アプリケーション
SQL Services
In-Memory Database
In-Memory Grid
XD
XD
XD
HDFS
New Data-fabrics
Software-Defined Datacenter
© Copyright 2014 Pivotal. All rights reserved.
...ETC
26
オープンPaaS を実現する基盤
Pivotal Cloud Foundry
• オープンPaas基盤として様々な選択肢を実装
-フレームワーク、開発言語
(Java, Ruby, Node. Groovy/Grails 等)
- アプリケーション・サービス
(データベース、メッセージング 等)
- クラウド・プラットフォーム (パブリック、プライベート・クラウド)
• 開発から本番環境展開まで同じコード/構成で
対応可能
• 幅広いエコシステム(オープンソース・コミュニティ)
• IBMとのPaaS分野での提携発表 (2013年8月)
• 商用版Pivotal CFを2013年第4四半期より出荷
•Cloud Foundry Foundation発足(2014年2月24日)
Pivotal,IBM,EMC,HP,SAP,Vmware,rackspace, 他
© Copyright 2014 Pivotal. All rights reserved.
フレームワーク、開発言語の選択肢
Y ou r A p p lication
Log ic
開発者
Java V M
N o d e.js
Lo g ic
Lo g ic
R u b y V M
G ro o vy/G rails
Lo g ic
Lo g ic
アプリケーションサービスの選択肢
高トランザクション
指向データサービス
クラウドプラットフォームの選択肢
コスト重視
データ関連サービス
パブリッククラウド
RightScale
リレーショナル指向
データサービス
メッセージ関連サービス
ドキュメント指向
データサービス
プライベートクラウド
仮想マシン(OVF)
ガバナンス重視
システム間連携向け
メッセージサービス
VMware
27
幅広い業界からのサポート
インスタンス &
マルチクラウドプ
ロバイダ
フレークワーク
&
サービス
マーケットプレース
&
パートナーシップ
© Copyright 2014 Pivotal. All rights reserved.
28
データサイエンスxアジャイル開発を支える
次世代のプラットフォーム
顧客が利用するアプリケーションに対して、
データ分析にもとづいた、リアルタイムの変
更が可能
分析
データの
フィード
展開/更新
(Private/Public)
Cloud Foundry BOSH
Big/Fast Data
© Copyright 2014 Pivotal. All rights reserved.
Infrastructure
29
A NEW PLATFORM FOR A NEW ERA
[email protected]
© Copyright 2014 Pivotal. All rights reserved.
30