ファイルサーバ

お知らせ

ファイルサーバの申請受付を再開いたしました。 (2019-07-19)
2018年7月に空調機故障があり縮退運転としておりましたが、9月上旬に空調機の修理が完了し通常運用に戻っております。長期間のご不便をおかけして申し訳ありません。

Last Updated: 2018/12/25

1. システム概要

ファイルサーバとは、数十台のラックマウントサーバにより構成された総容量約7PBの大規模データストレージシステムです。各サーバにはRAID6で冗長化されたボリュームが存在し、各ボリュームはNFSファイル共有により10GbEの高速ネットワークを介して解析サーバに接続されています。 2019年度供用開始分からはGlusterFSという分散ファイルシステムを使って複数台のサーバでひとつのボリュームを構成しています。各サーバの構成は以下の通りです。

表1. CfCAファイルサーバ
ホスト名	ボリューム構成
cfcafs[00-29]	約40TB x 3 合計約120TB
cfcafs[30-49]	約120TB x 1
glffs[100-102] /glv0	総容量 1.08 PB (distributed GlusterFS volume)

2. ファイルサーバ利用の手引き

データ量が大きくなりすぎて、解析サーバの "/home/ユーザアカウント名"のホームディレクトリだけでは足りなくなった場合はファイルサーバを利用してください。ファイルサーバを利用できるのは既にCray XC50 システム、GRAPE システム、計算サーバシステムを利用されている方です。利用を希望される方は、下記の「3. 申請方法」をご参照の上、ファイルサーバの利用申請を行ってください。申請が受理された後、ディレクトリが作成されます。 ファイルサーバ群の利用に際しては下記の注意事項を必ずお読みください。

2.1 glv0 に領域を持っている場合

各ユーザのディレクトリは解析サーバに "/glv0/ユーザアカウント名" という名前で常時マウントされています。 quota 情報は1時間に1度 /glv0/userspace.txt に書き込まれています。ユーザがコマンドで直接確認することはできません。ディレクトリを計算ノードから参照することはできません。負荷低減のためnoatimeでマウントしています．最終アクセス時刻は保存されません．

ファイルシステムの性質上、ls （tabによる補完を含む）や du といったメタデータを読み込むコマンドを多数のファイルに対して実行すると応答に非常に時間がかかります。容量と速度のトレードオフになっているため、短期的には改善できません。ご不便とは思いますが同一ディレクトリ内のファイル数を絞るなどしてご利用ください。

2.2 cfcafs[00-49]に領域を持っている場合

ディレクトリは解析サーバに"/misc/workXXX/ユーザアカウント名"という名前でオートマウントされます。 (XXXはユーザのディレクトリが作成されたファイルシステムの位置を示す3桁の数字で、利用開始時にメールで通知されます。) 解析サーバからディレクトリが見えない場合、一度 "ls /misc/workXXX/ユーザアカウント名" などのコマンドを用いてアクセスすることでマウントされます。ディレクトリは一定時間アクセスがなかった場合、自動的にアンマウントされます。

[注意事項]

ファイルサーバは比較的高度に冗長化されていますが、予期せぬデータ消失の可能性もあることを御承知おきください。ファイルサーバ利用に当たっての不慮の事故や自然災害等による利用者データの破損・消失、プログラム実行結果やその遅延等により利用者が受け得る如何なる損害についても、本プロジェクトとしては一切の補償・保証を行うことが出来ません。また、ファイルサーバ上の利用者データについて本プロジェクトとしてはバックアップの保管等は全く行っていません。あらかじめ御了承ください。
ファイルサーバを利用する上で相応しくない行為があったとこちらで判断した場合、警告無くファイルサーバの利用を停止させて頂きます。
利用状況により、別ディスクへの移動をお願いすることがあります。
利用状況により、ディスク領域1つに複数ユーザを割り当てることがあります。
利用状況により、必ずしも申請時に希望された容量を割り当てることが出来ない可能性があります。
1回の容量変更申請で増加可能な容量は物理容量で約40TBとさせていただきます。実効容量[1]では約36TBとなります。
ファイルサーバで利用出来る全容量の上限は物理容量で約240TBとさせていただきます。実効容量[1]では約216TBとなります。
各ディレクトリにはquota制限がかけられています、使用可能な容量はユーザ情報のページで確認できます。制限以上の容量が必要になった場合は別途、「ファイルサーバ利用申請」から容量変更の申請を行なって下さい。
ネットワーク帯域を過度に消費するデータ転送はご遠慮下さい。
半年間共同利用アカウントの申請を行わなかった場合、データの削除を行います。
ファイルサーバの利用申請から1年間ご利用の無かったディレクトリについては返却していただきます。

[1] HDDの容量が1TB=10^12Byte表記であるのに対して、ソフトウェアからは多くの場合1TB=2^40Byte(=1TiB)として認識されるために、TB表示の場合には最大で約9%の表記ずれが生じます（kB表示であれば約2.3%）。申請容量が40TB未満の場合には10^12Byte単位で制限を掛けているため、必ず申請容量よりも多く表示されますが、 40TB以上の場合には40TBや120TBのサーバを占有するという配分になることがあり、申請容量よりも少なく表示されることになります。どのような資源配分になるかは、機材の空き状況に依存しているためユーザ毎に厳密な数値は異なります。大容量の方ほど影響が大きくなりますが、仕様としてご理解いただけますようお願いいたします。

3. 申請方法

2020年度利用分から

申請方法は，希望容量によって異なります。

希望容量>10TBの場合
年２回(4月利用開始分と10月利用開始分)の募集を行います。 3月末でディスククォータを13%削減しますので，現在利用されている方も継続して同じ容量を利用したい場合は，毎年度申請する必要がありますので，ご注意ください。 XC50システムの2020年度利用申請(XC-Trial以外)と同じ日程で申請受付と審査をおこないます。
希望容量≦10TBの場合
随時申請を受け付けます。申請受付は2020年度4月より開始します。申請受理もしくは非受理の通知は、申請受付後10営業日以内に電子メールにて行います。

2019年度以前

申請は「ファイルサーバ利用申請」のフォームから行うことができます。申請受付中は、今見ているページの上部に申請フォームへのリンクがあります。（何等かの理由で申請を受け付けていない場合、当該リンクは見えません）ファイルサーバの利用状況に応じて、申請ページ内で「新規利用」「容量変更」の申請種別を選択して下さい。申請受理もしくは非受理の通知は、申請受付後10営業日以内に電子メールにて行います。

新規利用の場合
初めてファイルサーバを利用される方は「新規利用」の申請種別を選択して下さい。ファイルサーバで利用したいディスク容量を「希望するファイルサーバの容量」から選んで下さい。
容量変更の場合
既にファイルサーバを利用していて、より大きな容量が必要になった方、または、現在割り当てられている容量が必要なくなり、小さな容量に変更したい方はこちらの申請種別を選択して下さい。 選択するファイルサーバの容量は追加で欲しい容量ではなく、総容量を選択して下さい。

もしも利用申請してから 1 時間以内に受付確認のメール(自動送信)が届かない場合には、お手数ですが以下のページよりお問い合わせ下さい。

〒181-8588 東京都三鷹市大沢2-21-1
自然科学研究機構国立天文台天文シミュレーションプロジェクト ※ クリックすると、各種問い合わせフォームへと移動します。