EnterpriseDB Summit 2014 Tokyo 2014年7月商用RDBMSユーザが PostgreSQL/Postgres Plusを活用する際に考慮すべき７つのポイント株式会社アシスト Copyright © 2014 K.K.Ashisuto All Rights Reserved. 1 アジェンダ１アシストと PostgreSQL / Postgres Plus 2 PostgreSQL / Postgres Plus の採用傾向 3 採用するための７つのポイント 4 さいごに Copyright © 2014 K.K.Ashisuto All Rights Reserved. 2 アシスト会社概要オフィス所在地設立 1972年3月代表取締役会長ビル・トッテン代表取締役社長大塚辰男資本金 6,000万円売上高 211億円（ 2013年度）社員数 850名（ 2014年4月現在）事業内容本社所在地オフィス所在地札幌 ※グループ会社：㈱アシスト北海道併設コンピュータ用パッケージ・ソフトウェアの販売、技術サポート、教育およびコンサルティング東京都千代田区九段北4-2-1 市ヶ谷東急ビル札幌、仙台、名古屋、金沢、大阪、広島、宇部、福岡、沖縄取引会社数 5,600社（ 2013年度）主要取扱製品数 60製品（ 2014年4月現在）グループ会社株式会社アシスト北海道株式会社のれん市ヶ谷オフィスおよび大阪オフィスのサービス事業部におけるコンピュータソフトウェア・パッケージの販売、テクニカルサポート、教育およびコンサルティングサービスの提供に対してISO27001の認証を取得しています。仙台金沢東京本社宇部 ※グループ会社：㈱のれん併設 ※サポートセンターのみ名古屋福岡広島沖縄 Copyright © 2014 K.K.Ashisuto All Rights Reserved. 大阪サポートセンター 3 パッケージ・インテグレータ ● パッケージ・ソフトウェア専門商社 ● 開発をせず、パッケージ・ソフトウェア活用支援 ● パッケージ・ソフトウェアの発掘、展開の循環パッケージ・ソフトウェアニーズに合った製品セレクト蓄積された豊富な知識と経験満足度の高いサポートセンター使いこなし重視のオリジナル研修 Copyright © 2014 K.K.Ashisuto All Rights Reserved. 4 アシストが提供する価値とは『2006年年頭に、全社員に送付された現会長：ビル・トッテンのレター』アシストは「ソフトウェア・パッケージ」の代価をサプライヤーに支払い、アシストが手にする売上は、アシストが付加した「価値」に対する代価のみです。具体的にその「付加価値」とは、　・ユーザへのソフトウェアの紹介とソフトウェアの選択支援・ソフトウェアの導入と活用方法の習得支援・技術サポートの3つです。ソフトウェアが商用であっても、オープンソースであっても、ユーザが必要とするサービスは上記3つであることに変わりありません。逆にアシストの顧客がわれわれのサービスによって安心してオープンソースを活用できるようになれば、これまで商用ソフトウェアのサプライヤーに支払っていたロイヤリティ分だけ、コスト削減を実現することができるのです。 Copyright © 2014 K.K.Ashisuto All Rights Reserved. 5 DBMSプロダクト取扱いの歴史 ● DBMSはシステム・ソフトウェアの中核である ● DBMSを中心として様々なツールやユーティリティが開発１９７４年１９８５年１９８７年２００９年２０１１年２０１２年製品 / サービスシンコム・システムズ社「TOTAL」コンピュータ・アソシエイツ社「IDEAL」オラクル社「Oracle Database」オープンソース「PostgreSQL」サポートエンタープライズDB社「Postgres Plus」オープンソース「MySQL / MariaDB」サポートインフィニディービー社「InfiniDB」 Copyright © 2014 K.K.Ashisuto All Rights Reserved. 6 アジェンダ１アシストと PostgreSQL / Postgres Plus 2 PostgreSQL / Postgres Plus の採用傾向 3 採用するための７つのポイント 4 さいごに Copyright © 2014 K.K.Ashisuto All Rights Reserved. 7 DBMSの選択肢の広がり採用しているRDBMS 100% 80% Oracle Database IBM DB2 60% Microsoft SQL Server 40% MySQL/MariaDB PostgreSQL 20% 0% 2010 年２月１７日２０１３年１１月７日採用しているRDBMSの割合（複数回答可） 2013年11月7日弊社イベント「DB One Day Seminar」より Copyright © 2014 K.K.Ashisuto All Rights Reserved. 8 多くの企業で活用が始まる 2010 2011 2012 2013 弊社 PostgreSQL/Postgres Copyright © 2014 K.K.Ashisuto All Rights Reserved. Plus 関連売上情報より 9 PostgreSQL / Postgres Plus 取組み ● 自社（グループ企業）で活用する ● ANAシステムズ様 – ２０１４年アシストフォーラム事例講演 ● お客様に提案する ● アイテック阪急阪神様 – ２０１３年アシストフォーラム事例講演 Copyright © 2014 K.K.Ashisuto All Rights Reserved. 10 採用に至るまでの課題課題トップダウン背景現場が採用しないスイッチングコスユーザ起点トと期間・責任を負いたくない・実績、ノウハウ、技術者がいないポイント・現場の責任を転嫁する仕組み・採用のハードルを下げ、品質を保つ仕組み SQL、PL/SQLの修正、テ・システムライフサイクルをストが必要考慮したコストを試算・その後のビジネスプランを Copyright © 2014 K.K.Ashisuto All Rights Reserved. 11 アジェンダ１アシストと PostgreSQL / Postgres Plus 2 PostgreSQL / Postgres Plus の採用傾向 3 活用するためのポイント 4 さいごに Copyright © 2014 K.K.Ashisuto All Rights Reserved. 12 採用までの流れ ● ６つの主な活動と４つの支援活動１．評価２．試算３．試用４．標準５．適用７．調達技術開発６．展開人材育成全体管理 Copyright © 2014 K.K.Ashisuto All Rights Reserved. 13 １．適性を評価する ● 非機能要件を中心に機能評価する ● 実システムを想定して、採用の向き不向きが判定できるレベルの知識を有すること Copyright © 2014 K.K.Ashisuto All Rights Reserved. 14 １．適性を評価する ● 商用RDBMSとの処理傾向の違いを把握する ● 机上調査だけでなく簡単な実機動作結果を有すること評価バージョン PostgreSQL 9.3 Postgres Plus 9.3 Copyright © 2014 K.K.Ashisuto All Rights Reserved. 15 ２．適用効果を試算する ● 既存DBシステムを非機能要件で仕分けする ● IPA 非機能要件グレードを参考とする非機能要求グレード利用ガイド[利用編] P27 より Copyright © 2010 IPA Copyright © 2014 K.K.Ashisuto All Rights Reserved. 16 ２．適用効果を試算する ● シンプルで数値化できる試算上の目安をつくる ● 同時接続数、CPUコア数、データ・サイズ、稼働率など例タイプ用途同時接続数 CPUコア数データ・サイズスケールアウト稼働率 OLTP 業務 500 16 99.99% 1TB 参照のみ Postgres Plus を選択する条件・商用RDBMSからの移行で以下の機能が必要な場合パーティションニング、高度セキュリティ、性能管理、運用管理、異機種DBデータ連携、SQLヒント、SQL/プロシージャ互換 Copyright © 2014 K.K.Ashisuto All Rights Reserved. 17 ２．適用効果を試算する ● システム・ライフサイクルを考慮してコストを試算 ● 調達、資産 or 経費、改修、育成、運用など – サブスクリプション方式 ● ● ソフトウェアの利用した期間に応じて料金を支払う方式会計的にはソフトウェアを資産ではなく経費として処理できる Copyright © 2014 K.K.Ashisuto All Rights Reserved. 18 ３．サンプルプロジェクトで試用する ● 社内外のステークホルダー向けに実績をつくる ● 選定対象 – コスト、技術的にインパクトのあるシステムの一部分 ● ● ● ● Oracle Database Enterprise Edition Oracle Real Application Clusters Oracle Partitioning 対応範囲 – – 対象システムの一部分データ移行、アプリケーション改修、可用性確認など Copyright © 2014 K.K.Ashisuto All Rights Reserved. 19 ４．標準ガイドラインを整備する ● 採用のハードルを下げ、品質を確保する仕組み ● ● ● ● ● 採用および構成選定ガイドライン物理設計ガイドライン運用ガイドラインコーディング・ガイドラインデータベース移行ガイドライン Copyright © 2014 K.K.Ashisuto All Rights Reserved. 20 採用および構成選定ガイドライン・システム構成・データ配置方針・障害対策方針・障害発生の防止策・障害発生時の対策・災害発生時の対策・性能・拡張性対策方針・サーバ・リソースのサイジング・サーバのリソース拡張方式・データベース移行方針 Copyright © 2014 K.K.Ashisuto All Rights Reserved. ？ 21 採用および構成選定ガイドラインより（１）採用の目安とする要件の例採用の目安備考データサイズ必要CPUコア１TB １６インスタンスへの割当てメモリ 10GB 同時接続数処理の増加率 500 200% OLTPのレスポンス順守率 90% 障害復旧時のフルリストア、リカバリ時間を考慮バージョン9.3では、OLTPは16CPUコアまでスケールアップを確認バージョン9.3までは、Linux環境下における共有メモリ領域のhugepage設定がされていないため OLTPの同時接続試験より検索、更新を共にシンプルにスケールアウトできないため、スケールアップの対処を基準とする自動VACUUMの影響を考慮 Copyright © 2014 K.K.Ashisuto All Rights Reserved. 22 採用および構成選定ガイドラインより（２）可用性と拡張性、データ連携採用の目安備考稼働率 99.99% 可用性構成 Active/Stanbyのクラスタリングソフトウェア年間停止時間概算：１時間商用RDBMSで一般的に利用されている Active/Stanbyのクラスタリング構成を基本とする商用RDBMSと併用する場合、管理手法が同じ Active/Stanbyのクラスタリング方式を第一候補として考える。フェイルバックが容易である点も他の方式と比べて優位な点である仮想化環境に実装する場合、仮想化ソフトウェアのHA機能を利用することも検討する厳密なリアルタイム性を求めない参照処理の拡張構成としてストリーミング・レプリケーションを検討する異機種RDBMS間、バージョン間のデータ連携をテーブル単位に実施することができる数少ない方法である拡張性データ連携仮想化ソフトウェアのクラスタリング機能ストリーミング・レプリケーション xDBReplication Copyright © 2014 K.K.Ashisuto All Rights Reserved. 23 物理設計ガイドライン・バージョンの選定基準・データベース関連ファイルの構成と配置・表領域の設計・メモリ設計・初期化パラメータ・データベースクラスタ初期化時の設定・DBオブジェクト設計・OS設定・ネットワーク設計・インストール方法・インストール時の設定・ユーザ設計 Copyright © 2014 K.K.Ashisuto All Rights Reserved. 24 物理設計ガイドラインより（３）WAL領域、アーカイブ領域 WAL領域アーカイブ領域 RAID構成 RAID 1+0 RAID 1+0 アクセスタイプシーケンシャルシーケンシャル配置先データベース・クラスタとは別配置データベース・クラスタとは別配置参考サイズ 800MB 30GB サイズ算出式と前提条件 ( ( 3 × checkpoint_segments ) + 1) × WAL ファイルサイズ WAL ファイルサイズ × 1 時間あたりのファイル数 × 24 × アーカイブファイル世代数前提条件・checkpoint_segments : 16 ・WAL ファイルサイズ : 16MB 前提条件・WAL ファイルサイズ : 16MB ・1 時間のファイル数 : 20 ・アーカイブファイル世代数 : 2 備考アーカイブ領域の領域不足等でアーカイブできない状態となっても、当面の接続、参照、更新処理の全て可能である。ただし、アーカイブに欠落が発生するのを回避するため、本来削除されるべき WAL ファイルが残存する状態となる。それにより WAL 領域の領域が不足し、 WAL スイッチができない状態となると、データベースクラスタが停止する。 Copyright © 2014 K.K.Ashisuto All Rights Reserved. 25 運用ガイドライン・監視・死活監視・しきい値監視・エラー監視・LOGレベル監視　等・ログ管理・データベース監査・バージョンアップ・バックアップ・リカバリ・メンテナンス・VACUUM / ANALYZE ・インデックスの断片化解消・不要インデックスの対処・テーブルの肥大化解消　等 Copyright © 2014 K.K.Ashisuto All Rights Reserved. 26 運用ガイドラインより（４）インデックスの断片化インデックスの断片化対処監視間隔監視方法閾値 1日〜７日 pgstatindex 関数以下のいずれかを満たした場合・階層の高さ:　4階層以上・リーフページの断片化率 : マスタ表： 20%、ファクト表： 50% 対処インデックスの再作成対処方法 DROP/CREATE REINDEX CREATE INDEX CONCURRENTLY インデックスを使用した問合せ × ○ ○ 再作成中のDML × × ○ B*Tree高さの圧縮 ○ ○ ○ リーフ・ブロックの圧縮 ○ ○ ○ 未使用領域の開放 ○ ○ ○ 再作成中の追加領域不要一時的に既存と新規の索引領域 Copyright © 2014 K.K.Ashisuto All Rights Reserved. 27 運用ガイドラインより（５）エラー、ログ監視エラー監視備考監視間隔 5分システムの監視要件による監視方法サーバログエラーコードのクラス（エラーコードの最初の２ケタ）を監視対象とする監視対象クラス 53 リソース不足（メモリ不足、接続数制限等) 例：53300 too_many_connections クラス 57 操作の介入（SQL強制終了、セッション強制終了、DBの削除等）例：57014 query_canceled クラス 58 システムエラー（外部原因によるPostgreSQL自体のエラー）同時に出力される DETAIL や HINT から状況を確認する例：58030 io_error クラス XX 内部エラー（データ障害、インデックス障害）例：XX001 data_corrupted ログ出力情報の制御 log_line_prefix '%t pid=[%p] tid=[%x] SQL state=[%e] %q(%u %d %r %a) ' SQLSTATE エラーコードも出力する Copyright © 2014 K.K.Ashisuto All Rights Reserved. 28 コーディング・ガイドライン・SQLコーディング・使用可能な予約後および構文・暗黙の型変換の禁止・コード保守性、可読性の向上・アクセス方法の工夫・ソート処理に関する注意事項・結合に関する注意事項・索引を利用する場合の注意事項・DMLに関する注意事項・トランサクション制御に関する注意事項・データ取得方法に関する注意事項・SQL実行計画変動の防止　等・PL/pgSQLコーディング Copyright © 2014 K.K.Ashisuto All Rights Reserved. 29 コーディング・ガイドラインより（６）トランザクションの考慮事項デフォルト動作 PostgreSQL Postgres Plus 自動コミット自動コミットトランザクション開明示的にトランザクション開始を宣言始の宣言自動コミットの停止と、暗黙的なトランザクション開始を設定可能トランザクション内トランザクション内のあるSQLで例外がのSQL分離レベル発生した場合、トランザクション全体が破棄されるため、次のトランザクションを開始するためには、明示的にロールバックしなければならないトランザクション内のあるSQLで例外が発生した場合、当該SQLがロールバックされるだけで、トランザクションは継続する設定が可能動作設定 edb_stmt_level_tx パラメータを TRUEに設定することで、OracleDBと同様な動作が可能となる JDBC：db.setAutoCommit(false)などクライアントアプリケーション側で自動コミットを停止する制御が可能 Copyright © 2014 K.K.Ashisuto All Rights Reserved. 30 データベース移行ガイドライン・データベース移行フロー・データベース互換性・スキーマ定義移行・データ移行・SQLおよびPL/SQLの移行・SQLの修正・トランザクション制御・プロシージャの修正　等・アプリケーション移行・Oracleアプリケーションからの移行・Java ・C言語　等 Copyright © 2014 K.K.Ashisuto All Rights Reserved. 31 データベース移行ガイドラインより（７）パーティショニングの考慮事項 PostgreSQL Postgres Plus 実装手法テーブルの継承（親子テーブル） CHECK制約 PL/pgSQL トリガーテーブルの継承（親子テーブル） CHECK制約 C言語による実装実装手順プルーニング各コマンド、プロシージャパーティション用のDDL 親テーブルへのSELECT、UPDATE、DELETE は子テーブルに自動的に振分けられる。INSERTは親テーブルのトリガー定義により子テーブルに挿入先を振り分ける継承およびトリガーでのプルーニング C言語による高速プルーニングの実装のため１つの表に対して100個のパーにより１つの表に1000個のパーティティションを目安に利用するションにも対応パーティション全体に対する一意性を保証するインデックスを作成できない別途、テーブル継承の再定義などを実パーティションに対して、ADD、SPLIT、施 EXCHANGE,MOVE、RENAME、DR OP、TRUNCATEが可能パーティション数インデックスメンテナンス Copyright © 2014 K.K.Ashisuto All Rights Reserved. 32 ５．適用計画をつくる ● 適用しやすいプロジェクトを選ぶ ● ● ● アプリケーションの再作成が発生するもの DBシステムの要件として十分適用が可能なものガイドラインに準拠しやすいもの Copyright © 2014 K.K.Ashisuto All Rights Reserved. 33 ６．社内に展開する ● ガイドラインの普及と人材育成 ● ガイドラインを利用して現場担当者へノウハウを共有 ● ガイドラインを育てる ● ● 適合度の判定を行い浸透度を測る仕組み現場の要望やノウハウをガイドラインへ反映する流れ計画 Plan 改善 Act 実行 Do 評価 Check Copyright © 2014 K.K.Ashisuto All Rights Reserved. 34 ７．調達 ● 既存DBMSとPostgreSQL/Postgres Plusの両方を理解しているパートナーと協同する ● ● ● ● 適材適所のDBMSの選定が可能過度なチャレンジや、消極的な対応を是正できるデータ連携等では両DBMSの技術スキルが必要となる既存DBMSの用語で会話できるとコミニケーションが円滑になる Copyright © 2014 K.K.Ashisuto All Rights Reserved. 35 アジェンダ１アシストと PostgreSQL / Postgres Plus 2 PostgreSQL / Postgres Plus の採用傾向 3 採用するための７つのポイント 4 さいごに Copyright © 2014 K.K.Ashisuto All Rights Reserved. 36 アシストのサービス ● 採用、活用の各フェーズを支援します評価試算試用標準適用調達技術開発展開人材育成全体管理 Copyright © 2014 K.K.Ashisuto All Rights Reserved. 37 アシストのサービス ● 採用、活用の各フェーズを支援します評価技術コンサルティングサービス試算試用標準適用調達技術開発展開人材育成全体管理 Copyright © 2014 K.K.Ashisuto All Rights Reserved. 38 アシストのサービス ● 採用、活用の各フェーズを支援します評価技術コンサルティングサービス試算試用標準適用製品サポート調達技術開発展開人材育成全体管理 Copyright © 2014 K.K.Ashisuto All Rights Reserved. 39 アシストのサービス ● 採用、活用の各フェーズを支援します評価技術コンサルティングサービス試算試用標準適用製品サポート調達技術開発技術支援サービス展開人材育成全体管理 Copyright © 2014 K.K.Ashisuto All Rights Reserved. 40 アシストのサービス ● 採用、活用の各フェーズを支援します評価技術コンサルティングサービス試算試用標準適用製品サポート調達技術開発技術支援サービス展開人材育成 OSS-DB準拠の教育サービス全体管理 Copyright © 2014 K.K.Ashisuto All Rights Reserved. 41 コンサルティングサービスのサンプル http://www.ashisuto.co.jp/product/category/d atabase/postgresql/service/list/guideline.html Copyright © 2014 K.K.Ashisuto All Rights Reserved. 42 製品およびサービスについてのお問合わせ先株式会社アシスト情報基盤事業部ビジネス推進部 TEL：03-5276-3653 MAIL：[email protected] URL：http://www.ashisuto.co.jp/ ※本資料に記載されている社名、製品名は各社の商標または登録商標です。 ※本資料の全体または一部に記載されている内容については、予告なく変更する場合があります。 Copyright © 2014 K.K.Ashisuto All Rights Reserved. 43