交通大学应用数学ARAComputingSystem操作手册

交通大学应用数学ARAComputingSystem操作手册,PartI:使用者須知與操作說明,Architecture,ComputeNode,ServiceNodeNIS/NFS,WAN/LAN,NISNFS:/data,Network=,RHEL5.3,dl320,clw01,Switch,//,250GB,專案範圍,Intel5430,Intel5570,Intel5570,Intel5570,clw02,clw03,clw04,Compiler:Intel11.1-059Plot:Tecplot360,Matlab2008a,Matlab2009a（五人同時使用授權）,帳號管理,帳號管理:註一：/data/V下還細分課程名稱，例如FEM課程，則為/data/V/FEM註二：/data為NFS的分享目錄,資源限制,政策硬碟空間限制設定方式顯示空間限制可在任何一台計算主機上執行，以個人身份，查詢自己的空間限制$quota,帳號整理,原舊帳號保留，密碼未設，無法登入,帳號整理(續),原舊帳號移至T群組的UID/GID分配、目錄與預設密碼廠商管理群組廠商管理帳號,如何登入系統-在Windows環境的客戶端下連結本系統(1),系統遷入使用putty這隻freeware程式把google大神請出來，搜尋putty，找到網站，然後下載您可以選擇下載至您的桌面，以便以後使用。請點兩下開啟在HostName下，輸入您要登入的主機IP，例如：要登入clw04，請輸入05接著按Open，開啟terminal輸入您的帳號，按Enter接著輸入您的密碼，按Enter,如何登入系統-在Windows環境的客戶端下連結本系統(2),檔案傳遞使用winscp這隻程式，也是免費的一樣，把google大神請出來，找到下載點下載安裝完畢後，桌面出現WinSCP的圖案點兩下，出現WinSCP登入畫面，請點新增出現新增畫面，接著，輸入您要登入的主機名稱，例如：05用戶名稱：密碼：,如何登入系統-在Windows環境的客戶端下連結本系統(3),XmingServer遠端X桌面設定Xming，這隻程式也是免費的，可以到,如何登入系統-在Windows環境的客戶端下連結本系統(4),設定PUTTY連線時，將X11Forward過來接著，在使用putty遷入系統時，別急著按Open，先到Category中，Connection-SSH-X11將EnableX11forwarding選項打開接著再按Open，打開terminal輸入帳號密碼，登入系統,如何登入系統-在Windows環境的客戶端下連結本系統(5),XmingServer遠端X桌面使用輸入xterm，$xterm看是否能出現如右畫面，出現表示成功。X-ming的好處是可以將系統上好用的一些GUI工具如gnuplot，或者單位所採購的tecplot所顯示出的圖形給打到你的桌面上。如果要啟用tecplot，請在putty登入clw04之後，輸入$tec360之後按Enter，tecplot的圖形介面就會顯示到您的桌面上了。,如何登入系統-在Linux環境下的客戶端連結本系統,我們使用aracity這個帳號來展示，請在使用時，依實際情況，換成您的帳號名稱。系統遷入如果您是在xwindow下，請先開啟terminal使用ssh連入：$ssharacity05檔案傳遞如果您是在xwindow下，請先開啟terminal第一招-使用sftp$sftparacity05sftpput將檔案放上去sftpget將檔案傳回來第二招使用scp將檔案file.dat傳上去到家目錄目錄下$scpfile.dataracity05:/home/aracity將在Cluster上的檔案/home/aracity/file.dat給傳回來$scparacity05:/home/aracity/file.dat./將目錄myjob整個傳上去到家目錄下$scprmyjobaracity05:/X11桌面：不需設定，在使用ssh連入時加上-X就可以了$sshX05,系統登入與環境設定,系統登入本系統預設使用者能夠登入clw01,clw02,clw03,clw04這四部計算伺服器在從您個人電腦登入時，請以實體IP的方式或是DomainName方式登入在您登入到任何一台計算伺服器後，若要再登入到其他計算伺服器，請直接使用該計算伺服器的主機名稱全域共享目錄透過網路檔案系統(NFS)將檔案伺服器上的目錄輸出給每個計算伺服器，使得所有的計算節點都可以共享該目錄。使用者家目錄：/dataex:/data/T/smchang每一位使用者都會有自己的家目錄,系統登入與環境設定,使用者的預設環境本系統的預設環境為bash原則上，使用者可以透過ypchsh來更改自己登入的SHELL，但是，本系統的設定以bash及csh為主。使用者自行更改SHELL可能會造成無法預期的環境變數未設置的狀況發生。bash環境檔一般設定檔（不能更改，由管理者訂定）/etc/bashrc/etc/profile個人設定檔（可以更改，自訂環境）/.bashrc/.bash_profilecsh/tcsh環境檔一般設定檔（不能更改，由管理者訂定）/etc/csh.cshrc/etc/csh.login個人設定檔（可以更改，自訂環境）/.cshrc/.login,一般使用者如何更改密碼？,範例：使用aracity帳號，請登入clw01clw04任何一台電腦請勿登入dl320上去更改密碼，會無法更改成功$yppasswdChangingNISaccountinformationforaracityondl320.Pleaseenteroldpassword:-鍵入舊密碼Pleaseenternewpassword:-鍵入新密碼Pleaseretypenewpassword:./a.outOMPParallelJob使用ssh登入到任一計算節點clw01clw04更改目錄(ex/myprogram)到置放執行檔(ex:a.out)的地方$cdmyprogramsetOMPnumberofthreadsruntimeenvironmentvariable:exportOMP_NUM_THREADS=SetOMPruntimestacksizeexportKMP_STACKSIZE=128m執行$./a.out,Tecplot360的使用方式,請參照投影片的如何登入系統-在Windows環境的客戶端下連結本系統(1),(3)(5)這三張slides本軟體為單機永久授權，故同一時間僅能一人使用，請注意。GUI圖形操作介面如右展示本軟體安裝在clw04主機上，使用時請登入至clw04，配合使用Putty+Xming，將GUI圖形操作介面從遠端給打到近端的桌面上來。登入方法：開啟XmingServer開啟Putty，輸入05，並記得開啟X11Forwarding登入後，輸入#tec360,MatLab的使用方式,使用putty+Xming啟動請登入到相關的計算節點上，如要使用matlab2008a，則登入到clw01，如要使用matlab2009a，則登入到clw02clw042008a（安裝在clw01）$matlab$matlab2008a2009a（安裝在clw01clw04，有五個人的浮動授權）$matlab2009a,Linux環境下常用科學繪圖工具-gnuplot,在Linux下進行高性能計算，得到數據後的簡易XY繪圖，最常用的就是gnuplot他的好處是免費，而且輕薄短小，不佔太多記憶體資源，是一套跨平台的數學繪圖自由軟體，可以繪製數學函數圖形，也可以從純文字檔讀入大量數據，繪製統計圖表等。並且，對於以質點為主的資料的繪圖特別拿手除了提供Unix版的之外，也提供windows版，windows版下載處這個是cygwin版的，必須先安裝cygwin才行gp422win32.zip這個是原生版的，下載來，直接解開後就可以使用gnuplot-4.2.2.pdf這個則是document在本課程中，將教大家使用gnuplot來為程式執行後的結果繪圖。,Linux環境下程式開發常用編譯工具-make,make是編譯大量的sourcecode一定要用到的工具。當我們程式寫的很大，分成好幾個模組，就是一個一個小檔案時，這個時候，make就能很方便地幫助我們進行量程式編譯。最常用的就是寫一個Makefile，而make就會根據Makefile中所敘述的目標所定義的規則來作編譯動作，並創造出可執行的工具來。一個典型的Makefile(也可以是makefile)，內容如下：CC=gccCFLAGS=-O3funroll-all-loopsfomit-frame-pointerOBJ=main.oinput.ocompute.ooutput.omyprog:$(OBJ)$(CC)$(CFLAGS)omyprog$(OBJ)clean:rm*.o*準備好Makefile好後，只需要執行make，就可以進行編譯。make會自動搜尋Makefile檔，或是makefile檔來進行。$make$makefmymakefile如果名稱不是Makefile或makefile,Linux環境下程式開發常用編輯器viorgvim,vi為Linux環境下最常被使用的編輯器它支援c/c+/fortran以及bash/tcsh的各種語法，為各種語法設定不同顏色，以供閱讀如果是X-Window下，可以使用圖形式的vi編輯器gvim使用vi，並開啟檔案myprog.c進行編輯$vimyprog.cvi有分為編輯模式，命令列模式一、從命令到編輯模式a：將游標放到目前游標後一個字元，開始文字編輯模式。inserti：將游標放在目前游標位置，開始文字編輯模式。appendo：將游標放到下一行起始位置，開始文字編輯模式。opennewline比較常用就是i,a,o,I,A,O了，將來多試幾次就好了，就很熟悉了。二、從編輯到命令模式按ESC鍵：沒事多按逃脫鍵，有益身體健康。,Linux環境下程式開發常用編輯器viorgvim,三、命令模式中的其他命令在命令模式中的按鍵就很多了，這些需要好好熟練一下了。與檔案操作有關的命令:q-離開vi:exxxx-編輯xxxx:w-存檔:wxxxx-另存檔案xxxx:q!-不存檔強迫離開:w!-強迫存檔:wq-存檔與離開搜尋與取代/pattern尋找pattern?pattern往上尋找patternn再往下尋找N再往上尋找:s/patrn/str/cgi搜尋patrn取代str其中:跟s間必需指定範圍(range)沒設範圍就是游標這行1,10表示1-10行%表示整篇最後cgic表示confirm尋問g表示global全部i表示ignore不分大小寫,常用字元字串處理cc改變整行dd砍掉整行yy拷貝整行(yankwholeline)p(orP)貼上(paste)你最近砍掉或拷貝的,Linux環境下程式開發常用編輯器viorgvim,接續上頁搜尋與取代/pattern尋找pattern?pattern往上尋找patternn再往下尋找N再往上尋找:s/patrn/str/cgi搜尋patrn取代str其中:跟s間必需指定範圍(range)沒設範圍就是游標這行1,10表示1-10行%表示整篇最後cgic表示confirm尋問g表示global全部i表示ignore不分大小寫例如：:%s/abc/def/g表示把文中所有的abc取代成def:1,10s/aaa/bbb/g表示把第一行到第十行中的aaa全部取代成bbb,PartII:管理者須知與操作說明,資源限制,政策硬碟空間限制設定方式顯示空間限制可在任何一台計算主機上執行，以個人身份，查詢自己的空間限制$quota可在任何一台計算主機上執行，以root身份，查詢某個account的空間限制#quota設定空間限制請登入dl320，並使用root帳號，只有擁有超級管理者權限的使用者才能使用sudosu來轉成root帳號設定某個account的空間大小執行以下命令，此時會開啟vi來編輯某account的quota#edquota,資源限制(續),範例：#edquotasmchangDiskquotasforusersmchang(uid1003):Filesystemblockssofthardinodessofthard/dev/sdb16195276199229442097152010591700PS：blocks的單位為KB，所以如果是20GB=20 x1024x1024KB=20975120KB記憶體與程序數量限制設置檔：/etc/security/limits.conf主機：在clw01clw04各自有一個設置檔內容：Shardmaxlogins1Shardnproc15Shardrss25165824Vhardmaxlogins1Vhardnproc8Vhardrss4194304,超級管理者super群組,群組名稱權限能夠以sudo指令在無須密碼下執行root身份的工作轉換成為root帳號$sudosu設置方式登入dl320，轉成root帳號鍵入如下指令，來編輯/etc/group檔，在super群組下加入或刪減成員#vigr至dl320，clw01clw04下，轉成root帳號鍵入如下指令，來編輯/etc/sudoer檔#visudo加入如下設定%superALL=(ALL)NOPASSWD:ALL,NIS帳號管理,服務主機登入：請以一般具備super權限的使用者登入dl320服務主機，轉成root帳號新增帳號：新增屬於T群組的帳號查詢該群組下的流水編號(UID為1xxx的均屬於T群組)，例如，帳號名稱為teacher，流水編號為1007，則#useradd-u1007-g1000-d/data/T-mteacher新增屬於S群組的帳號查詢該群組下的流水編號(UID為2xxx的均屬於S群組)，例如，帳號名稱為g9700001，流水編號為2001，則#useradd-u2001-g2000-d/data/S-mg9700001新增屬於V群組的帳號，其課程名稱為FEM查詢該群組下的流水編號(UID為3xxx的均屬於T群組)，例如，帳號名稱為u9800001，流水編號為3001，則#useradd-u3001-g3000-d/data/V/FEM-mu9800001記住，V群組帳號被歸類為學生課程用帳號，故每一門課程在目錄/data/V下也有獨立的課程名稱目錄，所以，在建立新的課程，例如FEM，請先為此課程建立目錄。#mkdir/data/V/FEM#chownRV.V/data/V/FEM,NIS帳號管理(續),為新帳號設定密碼#passwd刪除帳號單一帳號刪除方式使用者家目錄不刪除，于以保留#userdel使用者家目錄一同刪除，不于保留#userdelr大量帳號刪除方式使用以下指令，直接可以用vi開啟/etc/password並編輯#vipw將要刪除的帳號一行行刪掉，結束後，儲存離開接下來，會問是否也要編輯/etc/shadow檔，回答Yes。進入編輯畫面將要刪除的帳號一行行刪掉，結束後，儲存離開然後，如果也要將使用者的家目錄一同清掉，直接使用rmrf指令將使用者的家目錄清掉即可。例如:u9800001的家目錄為/data/V/FEM/u9800001，則#rmrf/data/V/FEM/u9800001若要刪除整個FEM目錄下的使用者資料呢？#rmrf/data/V/FEM,NIS帳號管理(續),更新帳號資訊：在進行以下的設置後，必須要更新帳號資訊，讓所有的NISClient都能取得最新的資訊新增/修改/刪除帳號新增/修改/刪除群組為使用者在直接在NISServer(dl320)上使用passwd更改密碼更改/etc/password檔更改/etc/shadow檔更改/etc/group檔更改/etc/gshadow檔更改/etc/hosts檔更新方式：請登入dl320，並請轉到root帳號$sudosu#/aracluster/system/script/ypupdate.sh,設定磁碟配額,請登入dl320，並轉到root帳號屬於T群組的帳號，有20GB的配額(19GB的軟配額)#setquota-u199229442097152000/data屬於S群組的帳號，有2GB的配額(1.9GB的軟配額)#setquota-u1992294209715200/data屬於V群組的帳號，有200MB的配額#setquota-u20480020480000/data,帳號設定,設定帳號使用期限,範例：假設有一新建帳號，名為poisson，管理者可以在建立該帳號時，就設定使用期限，該帳號的家目錄為/data/T/poisson，UID流水編號是1007，屬於T(GID=1000)，群組期限日是2010/12/31。#useraddu1007g1000d/data/T/poissonmpoissone2010-12-31假設有一舊帳號，名為gauss，管理者想要重新設定該帳號的使用期限為2012/07/31，則#usermode2012-07-31gauss,新增一個帳號的SOP,建立一個帳號，名稱為gauss，屬於T群組(GID=1000)，其流水編號為1007，依照規則，他的家目錄為/data/T/gauss，其磁碟空間限制為20