機構内クライアントからの磁気ディスクシステムの利用
機構内クライアントからの磁気ディスクシステムの利用
磁気ディスクシステム用サーバ(GPFSサーバ)
磁気ディスクシステム用サーバ(以降GPFSサーバと呼称)および、CIFS/NFSサーバは、計算サーバ、ワークサーバ、Gridシステム、KEK内にある研究グループのホストに磁気ディスク領域を提供することを目的としています。研究グループのホストからの磁気ディスク領域へのアクセスは、ユーザ認証機能を取り入れるために NFS Version4 を使用し LDAP を利用した認証方法によるサービス提供を意図しています。クライアントからは NFSv4 にてアクセスできます。セキュリティ上注意が必要なので、特別な理由がある場合に限って利用を認めます。
磁気ディスクシステム領域
GPFSサーバで提供される磁気ディスクシステム領域について記載します。
なお、新システムでは従来のシステムと同様、所属グループに割り当てられた領域の容量や使用率などをご確認の際は、df コマンドではなく代替ツール(grpquotaコマンドもしくはgquotaコマンド)をご利用ください。また、ホーム領域の容量や使用率に関してもご確認をいただけます(hquotaコマンド)。詳しくは、利用上の注意を参照してください。
- ホーム領域(gpfs_home)
ワークグループ /サブグループ |
ディレクトリ | クオータサイズ |
---|---|---|
Acc | /home/acc | 100GB/user |
Atlas | /home/atlas | |
Bess | /home/bess | |
Central | /home/ce | |
CMB | /home/cmb | |
Had | /home/had | |
ILC | /home/ilc | |
ITDC | /home/itdc | |
QUP | /home/qup | |
MLF | /home/mlf | |
PS | /home/ps | |
T2K | /home/t2k | |
Theory | /home/th | |
Belle | /home/belle | 250GB/user |
Belle2 | /home/belle2 | 100GB/user |
- グループ領域(gpfs_group)
ワークグループ /サブグループ |
ディレクトリ | クオータサイズ | |
---|---|---|---|
Acc | /group/acc | 1TB | |
Atlas | /group/atlas | 5TB | |
Bess | /group/bess | 5TB | |
Central | ce_ce | /group/ce | --- |
ce_cc | /group/ce/cc | 1TB | |
ce_ccs | /group/ce/ccs | 1TB | |
ce_ccx | /group/ce/ccx | 1TB | |
ce_cryo | /group/ce/cryo | 2TB | |
ce_ebes | /group/ce/ebes | 20TB | |
ce_rad | /group/ce/rad | 30TB | |
ce_geant4 | /group/ce/geant4 | 1TB | |
ce_geant4_grid_storm | /group/grid/geant4 | 200GB | |
ce_pf | /group/ce/pf | 20TB | |
ce_kagra | /group/ce/kagra | 1TB | |
ce_kagra_grid_storm | /group/grid/kagra | 200GB | |
ce_sbrc | /group/ce/sbrc | 1TB | |
CMB | /group/cmb | 370TB | |
Had | had_had | /group/had | --- |
had_koto | /group/had/koto | 3 PB | |
had_trek | /group/had/trek | 30TB | |
had_sks | /group/had/sks | 200TB | |
had_knucl | /group/had/knucl | 100TB | |
had_muon | /group/had/muon | 300TB | |
had_staff | /group/had/staff | 10TB | |
had_g-2 | /group/had/g-2 | 6TB | |
had_high-p | /group/had/high-p | 100TB | |
ILC | ilc_ilc | /group/ilc | 260TB |
ilc_grid | /group/ilc/grid | 350TB | |
MLF | mlf_mlf | /group/mlf | 70TB |
mlf_nu | /group/mlf/nu | 180TB | |
mlf_deeme | /group/mlf/deeme | 100TB | |
NU | nu_hk | /group/nu/hk | 10TB |
nu_ninja | /group/nu/ninaj | 10TB | |
ITDC | itdc_tbl | /group/itdc/tbl | 5TB |
QUP | qup_gen | /group/qup/gen | 10TB |
qup_ldm | /group/qup/ldm | 75TB | |
PFCS | /group/pfcs | 3TB | |
PS | /group/ps | 1TB | |
SGR | /group/sgr | 10TB | |
T2K | /group/t2k | 600TB | |
Theory | /group/th | 20TB | |
tmp | /group/tmp | 1TB | |
Belle | /group/belle | 1260TB | |
/group/belle/users | 1TB/users | ||
Belle2 | /group/belle2 | 500TB | |
/group/belle2/dataprod | 1.5PB | ||
/group/belle2/CALIB | 200TB |
- ライブラリ領域(sw)
ワークグループ /サブグループ |
ディレクトリ | クオータサイズ |
---|---|---|
--- | /sw | --- |
CIFS/NFSサーバ
サーバ一覧
CIFSサーバは、2台のマシンで冗長化を構成しています。
CIFSサービスを利用して磁気ディスクシステムへアクセスする際は、代表ホスト名を使用してください。
CIFSサーバ 代表ホスト名 smbgw.cc.kek.jp
CIFS(samba)アクセスのパスワードとワークサーバにログインする際のパスワードは同一ではありませんので、ご注意ください。
以下に CIFS へアクセスするためのパスを記載します。
- ホーム領域
ワークグループ | 磁気ディスク領域上のパス | Windowsアクセスパス | MacOSXアクセスアド>レス |
---|---|---|---|
Acc | /home/acc/ユーザ名 | \\smbgw.cc.kek.jp\h_acc | smb://smbgw.cc.kek.jp/h_acc |
Atlas | /home/atlas/ユーザ名 | \\smbgw.cc.kek.jp\h_atlas | smb://smbgw.cc.kek.jp/h_atlas |
Bess | /home/bess/ユーザ名 | \\smbgw.cc.kek.jp\h_bess | smb://smbgw.cc.kek.jp/h_bess |
Central | /home/ce/ユーザ名 | \\smbgw.cc.kek.jp\h_ce | smb://smbgw.cc.kek.jp/h_ce |
CMB | /home/cmb/ユーザ名 | \\smbgw.cc.kek.jp\h_cmb | smb://smbgw.cc.kek.jp/h_cmb |
Had | /home/had/ユーザ名 | \\smbgw.cc.kek.jp\h_had | smb://smbgw.cc.kek.jp/h_had |
ILC | /home/ilc/ユーザ名 | \\smbgw.cc.kek.jp\h_ilc | smb://smbgw.cc.kek.jp/h_ilc |
ITDC | /home/itdc/ユーザ名 | \\smbgw.cc.kek.jp\h_itdc | smb://smbgw.cc.kek.jp/h_itdc |
QUP | /home/qup/ユーザ名 | \\smbgw.cc.kek.jp\h_qup | smb://smbgw.cc.kek.jp/h_qup |
MLF | /home/mlf/ユーザ名 | \\smbgw.cc.kek.jp\h_mlf | smb://smbgw.cc.kek.jp/h_mlf |
PS | /home/ps/ユーザ名 | \\smbgw.cc.kek.jp\h_ps | smb://smbgw.cc.kek.jp/h_ps |
T2K | /home/t2k/ユーザ名 | \\smbgw.cc.kek.jp\h_t2k | smb://smbgw.cc.kek.jp/h_t2k |
Theory | /home/th/ユーザ名 | \\smbgw.cc.kek.jp\h_th | smb://smbgw.cc.kek.jp/h_th |
Belle | /home/belle/ユーザ名 | \\smbgw.cc.kek.jp\h_belle | smb://smbgw.cc.kek.jp/h_belle |
Belle2 | /home/belle2/ユーザ名 | \\smbgw.cc.kek.jp\h_belle2 | smb://smbgw.cc.kek.jp/h_belle2 |
- グループ領域
ワークグループ | 磁気ディスク領域上のパス | Windowsアクセスパス | MacOSXアクセスアド>レス |
---|---|---|---|
Acc | /group/acc | \\smbgw.cc.kek.jp\g_acc | smb://smbgw.cc.kek.jp/g_acc |
Atlas | /group/atlas | \\smbgw.cc.kek.jp\g_atlas | smb://smbgw.cc.kek.jp/g_atlas |
Bess | /group/bess | \\smbgw.cc.kek.jp\g_bess | smb://smbgw.cc.kek.jp/g_bess |
Central | /group/ce | \\smbgw.cc.kek.jp\g_ce | smb://smbgw.cc.kek.jp/g_ce |
CMB | /group/cmb | \\smbgw.cc.kek.jp\g_cmb | smb://smbgw.cc.kek.jp/g_cmb |
Had | /group/had | \\smbgw.cc.kek.jp\g_had | smb://smbgw.cc.kek.jp/g_had |
ILC | /group/ilc | \\smbgw.cc.kek.jp\g_ilc | smb://smbgw.cc.kek.jp/g_ilc |
ITDC | /group/itdc | \\smbgw.cc.kek.jp\g_itdc | smb://smbgw.cc.kek.jp/g_itdc |
QUP | /group/qup | \\smbgw.cc.kek.jp\g_qup | smb://smbgw.cc.kek.jp/g_qup |
MLF | /group/mlf | \\smbgw.cc.kek.jp\g_mlf | smb://smbgw.cc.kek.jp/g_mlf |
PFCS | /group/pfcs | \\smbgw.cc.kek.jp\g_pfcs | smb://smbgw.cc.kek.jp/g_pfcs |
PS | /group/ps | \\smbgw.cc.kek.jp\g_ps | smb://smbgw.cc.kek.jp/g_ps |
T2K | /group/t2k | \\smbgw.cc.kek.jp\g_t2k | smb://smbgw.cc.kek.jp/g_t2k |
Theory | /group/th | \\smbgw.cc.kek.jp\g_th | smb://smbgw.cc.kek.jp/g_th |
Belle | /group/belle | \\smbgw.cc.kek.jp\g_belle | smb://smbgw.cc.kek.jp/g_belle |
Belle2 | /group/belle2 | \\smbgw.cc.kek.jp\g_belle2 | smb://smbgw.cc.kek.jp/g_belle2 |
下記に Windows からのアクセス方法の一例を記載します。
- エクスプローラーをたちあげ、ネットワーク上のコンピュータの検索を行う
- コンピュータ名に「smbgw.cc.kek.jp」を入力し、検索を実行する
- 検索結果で表示されたコンピュータを選択し、ダブルクリックすると、ユーザ名、パスワードの入力画面が表示される
- 申請後に送付されたユーザ名、パスワードを入力し、ログインする
- 上記表を参照し、使用するグループ/ホーム領域へアクセスする
CIFS パスワード変更方法
CIFSアクセス用パスワードの変更は、下記 URL より実施してください。
https://smbgw.cc.kek.jp/smbpasswd/index.html
上記ページの各入力項目には、次の内容を記述してください。
各入力項目 | 内容 |
---|---|
ユーザ名 | 中央計算機システムの登録ユーザ名を記述 |
古いパスワード | 申請時に送付されたCIFSアクセス用パスワードを入力 |
新しいパスワード | 任意の文字列を入力1 |
新しいパスワード 確認入力 |
新しいパスワードの確認入力 |
従来システムから移行したホームディレクトリのデータ
従来システムのホームディレクトリのデータ保存先について記載します。
従来システムのホームディレクトリのデータは /gpfs/home/old 配下 にあり読取専用となっています。適宜必要なデータをご自身のホームディレクトリにコピーしてください。
以下にデータ保存先へアクセスするためのパスを記載します。
データ保存先(/gpfs/home/old/"ワークグループ名"/"ユーザ名")
ワークグループ /サブグループ |
データ保存先 ディレクトリ・パス |
旧計算機システム利用時の ディレクトリ・パス |
---|---|---|
Acc | /gpfs/home/old/acc | /home/acc |
Atlas | /gpfs/home/old/atlas | /home/atlas |
Bess | /gpfs/home/old/bess | /home/bess |
Central | /gpfs/home/old/ce | /home/ce |
CMB | /gpfs/home/old/cmb | /home/cmb |
Had | /gpfs/home/old/had | /home/had |
ILC | /gpfs/home/old/ilc | /home/ilc |
MLF | /gpfs/home/old/mlf | /home/mlf |
PS | /gpfs/home/old/ps | /home/ps |
T2K | /gpfs/home/old/t2k | /home/t2k |
Theory | /gpfs/home/old/th | /home/th |
Belle | /gpfs/home/old/belle | /home/belle |
Belle2 | /gpfs/home/old/belle2 | /home/belle2 |
従来システムから移行したグループディレクトリのデータ
従来システムのグループディレクトリのデータ保存先について記載します。
従来システムのグループディレクトリのデータは同様のディレクトリに保存されています。
従来システムから移行したライブラリディレクトリのデータ
従来システムのライブラリディレクトリのデータ保存先について記載します。
ライブラリディレクトリのデータは /sw/old にあり読取専用となっています。適宜必要なデータを各グループのライブラリディレクトリにコピーしてください。
対象領域 | データ保存先 ディレクトリ・パス |
旧計算機システム利用時の ディレ>クトリ・パス |
---|---|---|
ライブラリ領域 | /sw/old | /sw |
利用上の注意
利用申請
- CIFS を利用するためには、データ解析システムに アカウント を申請する必要があります。申請書は こちら の「運用計算機システム」を参照してください。申請時に、CIFS を利用する場合は「ユーザーアカウント申請書」の "CIFSサーバ" にチェックをしてください。
- NFS/CIFS サービスを利用できるのは、KEK 内のクライアントに限ります。
- NAT 環境からのディスク領域へのアクセスは不可とします。
- NFS サービスを利用してディスク領域へアクセスするホストは、機構のノードデータベース、及び DNS に登録されている必要があります。
- NFS サービスを利用してアクセスする場合、クライアントの IP アドレスをサーバ上に定義します。IP アドレスに変更が発生した場合は、変更申請を行ってください。
- NFS サービスを利用したディスク領域へのアクセスについては、 root 権限でのアクセスは許可されていません。
使用可能領域
ここでは、ホーム領域およびグループ領域のサイズや使用状況の確認方法について記載します。
「ファイルシステム」の項でも述べたとおり、新システムでは従来のシステムと同様に所属グループに割り当てられた領域のサイズや使用率を確認するツールとしてgrpquotaコマンド、gquotaコマンドを用意しています。
grpquotaコマンドは、ファイルが無い領域の使用量は 0 と表示しますのでご注意ください。
また、各ユーザに割り当てられたホーム領域のサイズや使用率を確認する場合はrquotaコマンド、もしくはhquotaコマンドをご利用ください。
Belleグループのユーザ領域 /group/belle/users/ の確認にはbquotaコマンドをご利用ください。
grpquotaコマンド
<書式> : grpquota [OPTION] {Group_DIR}
Options:
-h, --help display this help and exit
-l, --list list group directories
-a, --show-all show all usages
-t, --terabyte print usage in terabyte (default auto)
-g, --gigabyte print usage in gigabyte
-m, --magabyte print usage in magabyte
-k, --kilobyte print usage in kilobyte
[使用例]
$> grpquota /group/ps
GROUP_DIR Used Quota Use%
/group/ps 323 GB 1 TB 31%
[使用例]
$> grpquota -k /group/ps
GROUP_DIR Used Quota Use%
/group/ps 338813952 KB 1073741824 KB 31%
gquotaコマンド
<書式> : gquota [ -K | -M | -G ] {Directory}
Directory :
/group/ps | /group/mlf | /group/ilc | /group/acc | /group/atlas | /group/ce | /group/ce/cc | /group/ce/ccs |
/group/ce/ccx | /group/ce/rad | /group/pfcs | /group/th | /group/bess | /group/sgr | /group/belle | /group/belle/users |
/group/belle2 | /group/had | /group/had/koto | /group/had/g-2 | /group/had/trek | /group/had/sks |
/group/t2k | /group/cmb
[使用例]
$> gquota -M /group/ps
Checking Quota Data...
Block Limits | File Limits
Filesystem type MB quota limit in_doubt grace | files quota limit in_doubt grace Remarks
/group/ps FILESET 858233 0 1048576 0 none | 527893 0 0 0 none
[使用例]
$> gquota -G /group/ps
Checking Quota Data...
Block Limits | File Limits
Filesystem type GB quota limit in_doubt grace | files quota limit in_doubt grace Remarks
/group/ps FILESET 838 0 1024 0 none | 527893 0 0 0 none
[使用例]
$> gquota -K /group/belle/users
Checking Quota Data...
Block Limits | File Limits
Filesystem type KB quota limit in_doubt grace | files quota limit in_doubt grace Remarks
/group/belle/users USR 0 0 1073741824 0 none | 1 0 0 0 none
rquotaコマンド
<書式> : rquota
[使用例]
$> rquota
Block Limits | File Limits
Filesystem type KB quota limit in_doubt grace | files quota limit in_doubt grace Remarks
/home/ce USR 416 0 104857600 0 none | 13 0 0 0 none
hquotaコマンド
<書式> : hquota [ -h | -g | -k ]
[使用例]
$> hquota
HOME directory usage: 0/100 GB (0%)
[使用例]
$> hquota -k
HOME directory usage: 1376K / 100GB (0%)
[Belleユーザの使用例]
$> hquota
HOME directory usage: 33G / 250GB (13%)
Your usage in /group/belle/users/: 43G / 1024GB (4%)
bquotaコマンド
<書式> : bquota
[使用例]
$> bquota
Block Limits | File Limits
Filesystem type KB quota limit in_doubt grace | files quota limit in_doubt grace Remarks
/group/belle/users/[USERNAME] USR 45412849 0 1073741824 0 none | 54739 0 0 0 none
gquota コマンドに関しては、引数としてサイズ単位の指定が可能です。また、特定のディレクトリを指定して表示できます。
hquota コマンドに関しては、引数としてサイズ単位の指定が可能です。
表示される各項目は、左から順番に以下の通りとなります。
- Filesystem:対象となる領域
- type :クォータ・タイプ。FILESETはファイルセット全体のクォータ値と使用率を表示しています。USRは各ユーザごとのクォータ値と使用率を表示しています。
≪Block Limits≫
- KB :ディスク使用容量
- quota :ディスクソフトリミット
- limit :ディスクハードリミット
- grace :ディスク書込不可猶予期間(設定無し。ハードリミットに達した際は * が表示されます)
≪File Limits≫
- files :保持ファイル数
- quota :ファイル数ソフトリミット(設定無し)
- limit :ファイル数ハードリミット(設定無し)
- grace :ファイル作成不可猶予期間(設定無し)
-
新しいパスワードは以下の条件を満たす任意の文字列になります。
- 9文字以上 - アルファベット 1文字以上含む - 数字 1文字以上を含む - 記号 1文字以上を含む ↩