物理学実験のデータ解析環境

次期共通計算機システムの概要
2008年12月9日（火）
共通基盤研究施設計算科学センター
八代茂夫
► 概要
とシステムの移行の説明
► データ解析システムの詳しい説明会は
2009年2月に開催予定
KEKCC
► KEKのプロジェクト(jparcを含む)のための計算
資源、ストレージ
► データ解析システム KEKCC
 ストレージシステム、計算サーバ、ワークサーバ、
並列サーバ
 GRIDサーバ、アクセスサーバ
 運用期間 2009/3/2 – 2012/2/22
Central Computing System after Mar. 2009
Computing Server
80 IBM System x3550
Intel Xeon-QX 5460 x2
MEM:16GB
GPFS/VFS
GRID Systems
GPFS/VFS
VFS
LCG System
Naregi System
iRODS/SRB System
GPFS
NFS/CIFS
Tokai campus
J-PARC
Storages
HPSS
Work Server
SSH
8 IBM System x3550
Intel Xeon-QX 5460
x2
MEM:16GB
IBM TS3500（3PB）
IBM 3592 Tape Drive
IBM DS4800（10TB）
NFS/CIFS/FTP
Disk Storage
IBM DS4800（205TB）
LTO4 Tape Drive
router
NFS/CIFS/FTP
router
KEK intra
KEK-FW
FW
DMZ
User’s host
Access server
(any)
FW
FW
router
SINET3
KEKCCのサービス
► 計算サービス
 Linux (Red Hat Linux)
 並列計算
► ストレージサービス
 ファイルのバックアップ
► CIFS
サービス
 外部の機関とのデータ共用
► LCG,
iRODS
► 利用するには
 アカウント申請
 利用の手引など http://kekcc.kek.jp/
 問合せ先 [email protected]
現行システムからの移行
► 現行システムの運用停止
 2009/1/19 13:00停止予定
► 移行作業はエンドユーザの操作は原則として必要なし
 詳細はワークグループ管理者と協議中
 ユーザの移行
► 既存のユーザは申請なしで移行する方向で調整中
 ホーム、グループ領域の移行
► 12月中にバックアップの第１次作業
► 運用停止後に最終的なバックアップ作業
► 旧システムから引き継いだ
~/old_data は移行しません。
 必要なファイルは ~/public あるいは ~/private に移動してください。
 HPSSの移行
► 移行スケジュールはHPSS利用者に連絡済
約6週間の運用停止期間
► システム更新のための運用停止期間
 2009/1/19 13:00 - 3/2 13:00（予定）
 この間の計算機資源
►各研究グループのシステム
►暫定システム
 この間に必要なデータは1/19の停止以前に複写し
てください
暫定システム
► システムがなくなると困るグループの為に用意
 ワークグループ管理者を通じて需要調査
e391a から要望あり
► 必要な方は早めにご相談ください。可能な範囲で対応します。
► 放射線,
 CPU
 磁気ディスク
► 運用停止期間に必要なデータは、1/19の停止以前にグループディ
スク領域に複写してください
► この間に作成したデータの移行サービスは行いません。各自移行し
てください
 期間 2009/1/26 - 3/5 頃まで
► データ解析システムの詳しい説明会は
2009年2月に開催予定
Backup
次期共通情報システム
►引き続き日本アイビーエムからのリースおよび運用支援
►３年間のリース
 2012/2/22 までの契約
►現共通情報システム、旧放射光計算機システム、JPARC
実験のデータ解析の機能
共通情報システム
 データ解析システム KEKCC
► ストレージシステム、計算サーバ、ワークサーバ、並列サーバ
► GRIDサーバ、アクセスサーバ
► 期間
2009/3/2 – 2012/2/22
 暫定システム 2009/1/20 – 2009/3/2
 情報システム
► 電子メイルシステム（押久保）
► Webシステム(柿原、村上）
► 期間
2009/1/20 – 2012/2/22
 その他
► プリンタ(柿原）
、時刻同期サーバ、PC構成サーバ、その他
► 期間 2009/1/20 – 2012/2/22
計算サーバ、ワークサーバ
►
計算サーバ
 IBM System x3550 84台
► Intel
Xeon-QX 5460 x2, 8コア/ノード
► メモリ 16GB/ノード
 OS: RHEL5 / SL4(Grid)
 バッチ処理: LSF 7
►
ワークサーバ
 プログラム開発, ジョブの投入
 IBM System x3550 4台
►
並列サーバ
 IBM System x3650 4台
► Intel
Xeon-QX 5460 x2、8コア/ノード
► メモリ 32GB/ノード
 For Gaussian users
ストレージシステム
205TB
► 大容量ストレージシステム 3PetaBytes
► 磁気ディスクシステム





HPSS 6.2
Tape library: TS3500
Tape drives: 10 3592E06, 1TB/vol, 160MB/s
Cache disk : 10TB
インターフェイス
► C/C++
で API
► Pftp, kerberos-ftp, ftp
► ファイルシステム: VFS
► Grid-ftp
Webシステム
► 機構Webシステム
► 研究情報Webシステム
 研究グループあるいは研究者が研究情報を発信
► コンファレンスWebシステム
 コンファレンス等の申し込み
► 会議支援Webシステム
 研究グループが開催する会議の資料の掲載
KEKCCに関する新しいこと
► KEK-FW
下の LAN から抜けて、独自 FW
 LANとの通信はKEK-FW経由
► 外部機関とのデータ共用機能
 Grid – LCG, Naregi, iRORS, SRB
► 外部からの
SSH アクセス
 登録したサイトからはワークサーバに直接
 登録無のサイトからはDMZ経由
► JPARCからのデータ転送
デスクトップ環境支援システム
► 支援内容
 市販ソフト、フリーソフトの導入支援
►ソフトはユーザの要望を検討して選択
 Windows update, アンチウイルスソフトの更新
► 目的、必要条件




職員のWindowsの環境整備の支援
PCの管理者権限は、所有者
一人が1台とは限らない → マシン単位に管理
NAT下のPCでも利用可

Download Report