OpenMX: Perbedaan antara revisi

Dari ALELEON by EFISON
(formatting terminal)
 
(2 revisi perantara oleh pengguna yang sama tidak ditampilkan)
Baris 42: Baris 42:


== '''Pilihan MPI atau Threading OpenMP untuk Menjalankan OpenMX''' ==
== '''Pilihan MPI atau Threading OpenMP untuk Menjalankan OpenMX''' ==
OpenMX dapat berjalan melalui metode paralelisasi MPI, threading OpenMP (OMP), atau Hybrid MPI/OMP. ALELEON Supercomputer menyerahkan keputusan kepada user untuk memilih metode paralelisasi tersebut melalui konfigurasi pada SLURM Submit Script (''lihat subbab Menjalankan OpenMX''):
OpenMX di ALELEON Supercomputer dapat berjalan melalui paralelisasi '''MPI''', '''OpenMP''' (OMP), atau keduanya ('''hybrid MPI/OMP''') untuk menggunakan multi-core CPU dan multi-node. Admin menyerahkan keputusan kepada user untuk memilih metode paralelisasi melalui parameter Submit Script berikut:
*SBATCH ntasks mewakili jumlah task MPI sedangkan SBATCH cpus-per-task mewakili jumlah thread OMP.
*''Penjelasan submit script lihat subbab berikutnya (Pilihan Menjalankan Komputasi).''
*'''SBATCH ntasks mewakili jumlah task MPI sedangkan SBATCH cpus-per-task mewakili jumlah thread OMP.'''
  '''#SBATCH --ntasks''' ''-> mewakili jumlah task MPI''
  '''#SBATCH --ntasks''' ''-> mewakili jumlah task MPI''
  '''#SBATCH --cpus-per-task''' ''-> mewakili jumlah thread OpenMP''
  '''#SBATCH --cpus-per-task''' ''-> mewakili jumlah thread OpenMP''
*Apabila ingin Pure MPI maka isi jumlah SBATCH cpus-per-task dengan 1.
*'''Apabila ingin MPI saja,''' isi jumlah SBATCH cpus-per-task dengan 1:
  ''# Pure MPI''  
  ''# Pure MPI''  
  '''#SBATCH --ntasks='''''[isi-sesuai-keinginan]''
  '''#SBATCH --ntasks='''''[isi-sesuai-keinginan]''
  '''#SBATCH --cpus-per-task=1'''
  '''#SBATCH --cpus-per-task=1'''
*Apabila ingin Hybrid MPI/OMP maka isi kedua parameter tersebut. Perlu diingat bahwa total core CPU yang digunakan adalah ntasks * cpus-per-task. Contoh berikut menggunakan 2 proses MPI dan 4 thread OMP per MPI sehingga total menggunakan 8 core CPU:
*'''Apabila ingin Hybrid MPI/OMP,''' isi kedua parameter tersebut:
**Total core CPU yang digunakan adalah '''ntasks * cpus-per-task'''.
**Contoh menggunakan 2 proses MPI dan 4 thread OMP per MPI sehingga total menggunakan 8 core CPU:
  ''# Hybrid MPI/OMP, contoh dengan 2 proses MPI dan 4 thread OMP per MPI.''
  ''# Hybrid MPI/OMP, contoh dengan 2 proses MPI dan 4 thread OMP per MPI.''
  '''#SBATCH --ntasks=2'''
  '''#SBATCH --ntasks=2'''
  '''#SBATCH --cpus-per-task=4'''
  '''#SBATCH --cpus-per-task=4'''
*Apabila ingin Pure OMP maka isi jumlah ntasks dengan 1.
*'''Apabila ingin OMP saja,''' isi jumlah ntasks dengan 1:
  ''# Pure OMP''  
  ''# Pure OMP''  
  '''#SBATCH --ntasks=1'''
  '''#SBATCH --ntasks=1'''
  '''#SBATCH --cpus-per-task='''''[isi-sesuai-keinginan]''
  '''#SBATCH --cpus-per-task='''''[isi-sesuai-keinginan]''
=='''Metode Menjalankan Komputasi'''==
=='''Metode Menjalankan Komputasi'''==
User dapat memilih metode menjalankan komputasi sesuai keinginan:
User dapat menjalankan OpenMX dengan pilihan metode:
*'''Job submission terminal'''
**''Berjalan di [[Spesifikasi ALELEON Supercomputer#Spesifikasi%20Compute%20Node|compute node]] melalui manajemen Slurm.''
*'''Job submission web EFIRO'''
**''Berjalan di [[Spesifikasi ALELEON Supercomputer#Spesifikasi%20Compute%20Node|compute node]] melalui manajemen Slurm via web EFIRO.''


=== Job Submission Terminal ===
=== Batch Job ===
Menjalankan komputasi di [[Spesifikasi ALELEON Supercomputer#Spesifikasi%20Compute%20Node|compute node]] melalui manajemen Slurm kemudian user menunggu hingga selesai. Terdapat dua opsi tampilan yang dapat dipilih sesuai preferensi user: ''<small>(klik expand atau kembangkan)</small>''
{| class="wikitable mw-collapsible mw-collapsed"
{| class="wikitable mw-collapsible mw-collapsed"
!Langkah Job Submission Terminal
!Langkah Job Submission Slurm di Terminal
[[Berkas:Sbatch Terminal.png|tepi|400x400px]]
[[Berkas:Sbatch terminal display rev2.png|tepi|400x400px]]
|-
|-
!1
!1
Baris 150: Baris 150:
|}
|}
|-
|-
| Contoh template Submit Script, ikuti petunjuk NOTES didalamnya.
|
{| class="wikitable mw-collapsible mw-collapsed"
* ''<small>Info script lebih detail lihat [[Submit Script ALELEON Supercomputer|'''Submit Script ALELEON Supercomputer''']].</small>''
!Template OpenMX
 
|}
*''<small>Untuk SBATCH notifikasi email status jalannya job lihat [https://wiki.efisonlt.com/wiki/Submit_Script_ALELEON_Supercomputer#SBATCH_untuk_notifikasi_email_SLURM '''Slurm Jojo'''].</small>''
|-
!
|-
|*''Info script lebih detail lihat [[Submit Script ALELEON Supercomputer|'''Submit Script ALELEON Supercomputer''']].''
*''Untuk SBATCH notifikasi email status jalannya job lihat [https://wiki.efisonlt.com/wiki/Submit_Script_ALELEON_Supercomputer#SBATCH_untuk_notifikasi_email_SLURM '''Slurm Jojo'''].''
|-
|-
!3B
!3B
Baris 214: Baris 209:
  $ scancel 231  
  $ scancel 231  
|}
|}
===Job Submission Web EFIRO===
{| class="wikitable mw-collapsible mw-collapsed"
{| class="wikitable mw-collapsible mw-collapsed"
! Langkah Job Submission Web EFIRO
! Langkah Job Submission Slurm di Web EFIRO
[[Berkas:Efirojobcomposer3.png|nirbing|400x400px]]
[[Berkas:Efiro jobcomposer display.png|nirbing|400x400px]]
|-
|-
!1
!1
Baris 225: Baris 219:
!2
!2
|-
|-
|Buka pinned apps '''Job Composer''' [[Berkas:New Pinnedapps jc.png|nirbing|128x128px]] di homepage EFIRO.
|[[Berkas:New Pinnedapps jc.png|nirbing|128x128px]]Buka pinned apps '''Job Composer'''  di homepage EFIRO.
Pilih menu '''<code>New Job</code>''' -> '''<code>From Template</code>'''
Pilih menu '''<code>New Job</code>''' -> '''<code>From Template</code>'''


Baris 234: Baris 228:
|
|
{| class="wikitable"
{| class="wikitable"
! colspan="2" |Pilih template OpenMX yang diinginkan
! colspan="2" |Pilih template OpenMX yang diinginkan:
|-
|-
!Nama Template
!Nama Template
Baris 247: Baris 241:
! 4
! 4
|-
|-
| Siapkan file komputasi yang dibutuhkan.
| Siapkan file komputasi yang dibutuhkan:
[[Berkas:Jcjoboption.png|nirbing|400x400px]]
*Upload file melalui menu '''<code>Edit Files</code>'''
*Upload file melalui menu '''<code>Edit Files</code>'''
**Untuk upload file tunggal diatas 2GB gunakan [[Upload File dengan Aplikasi FTP|'''software FTP''']].
**Untuk upload file tunggal diatas 2GB gunakan [[Upload File dengan Aplikasi FTP|'''software FTP''']].
*Perhatikan DATA.PATH pada file input.
*Perhatikan DATA.PATH pada file input.
[[Berkas:JC job menu.png|nirbing|500x500px]]
|-
|-
!5A
!5A
Baris 260: Baris 254:
*Ikuti petunjuk NOTES didalamnya
*Ikuti petunjuk NOTES didalamnya
*Klik '''<code>Save</code>''' setiap kali mengubah script.
*Klik '''<code>Save</code>''' setiap kali mengubah script.
|-
!
|-
|-
|
|
*''Info script lebih detail lihat [[Submit Script ALELEON Supercomputer|'''Submit Script ALELEON Supercomputer''']].''
*''<small>Info script lebih detail lihat [[Submit Script ALELEON Supercomputer|'''Submit Script ALELEON Supercomputer''']].</small>''
*''Untuk SBATCH notifikasi email status jalannya job lihat [https://wiki.efisonlt.com/wiki/Submit_Script_ALELEON_Supercomputer#SBATCH_untuk_notifikasi_email_SLURM '''Slurm Jojo'''].''
*''<small>Untuk SBATCH notifikasi email status jalannya job lihat [https://wiki.efisonlt.com/wiki/Submit_Script_ALELEON_Supercomputer#SBATCH_untuk_notifikasi_email_SLURM '''Slurm Jojo'''].</small>''
|-
|-
!5B
!5B
Baris 274: Baris 266:
*Spesifikasi sistem dan software komputasi.
*Spesifikasi sistem dan software komputasi.
Untuk melihat limit, jalankan perintah berikut pada terminal:
Untuk melihat limit, jalankan perintah berikut pada terminal:
  '''$ slimit-hybmpi'''
  '''$ slimit-hympi'''
|-
|-
!6
!6
|-
|-
|Jalankan job dengan klik tombol '''<code>Submit</code>'''.
|Jalankan job dengan klik tombol '''<code>Submit</code>'''.
[[Berkas:Jcsubmit2.png|al=|nirbing|400x400px]]
*Pantau kolom status yang menjelaskan status jalannya job.
*Pantau kolom status yang menjelaskan status jalannya job.
*Apabila ingin membatalkan job yang berjalan, klik '''<code>Stop</code>'''.
*Apabila ingin membatalkan job yang berjalan, klik '''<code>Stop</code>'''.
* Job completed dapat dijalankan kembali dengan '''<code>Submit</code>'''.
[[Berkas:JC job runstop.png|al=|nirbing|500x500px]]
{| class="wikitable mw-collapsible mw-collapsed"
{| class="wikitable"
! colspan="2" |Daftar status job:
! colspan="2" |Daftar status job
|-
|-
!Status
!Status
Baris 302: Baris 293:
|-
|-
|Failed
|Failed
|Job berhenti di tengah jalan, antara error atau di stop user
|Job berhenti karena error atau di stop user.
|-
|-
| colspan="2" |'''Untuk melihat alasan queue:'''#Buka app '''<code>Active Jobs</code>''' [[Berkas:Pinnedapps activejobs.png|nirbing|127x127px]]di homepage EFIRO.
| colspan="2" |'''''Untuk melihat alasan job yang queue:'''''[[Berkas:Active Jobs detail.png|nir|jmpl|300x300px|''Buka pinned apps '''Active Jobs''' di homepage EFIRO. Ubah opsi All jobs ke '''Your Jobs'''. Klik simbol '''>''' untuk melihat status job yang pending pada kolom Reason. Arti reason lihat laman [[Daftar Reason NODELIST ALELEON Supercomputer|'''Daftar Reason NODELIST ALELEON Supercomputer''']].'']]
#[[Berkas:Efiroqueueedit.png|nir|jmpl|''Ubah opsi '''<code>Your jobs</code>''' untuk melihat status job user saja. Klik simbol '''>''' untuk melihat status job pending pada kolom '''Reason'''. Arti reason lihat laman '''[[Daftar Reason NODELIST ALELEON Supercomputer]].''''']]
|}
|}
|-
|-
Baris 313: Baris 303:
* Atau dengan membuka '''<code>Edit Files</code>'''
* Atau dengan membuka '''<code>Edit Files</code>'''
[[Berkas:Jcfoldercontentsedit.png|al=|nir|jmpl|''Kolom '''<code>Folder Contents</code>'''.'']]
[[Berkas:Jcfoldercontentsedit.png|al=|nir|jmpl|''Kolom '''<code>Folder Contents</code>'''.'']]
|-
!8
|-
|Untuk menghapus ruang job dan datanya:
*Pilih ruang job yang akan dihapus.
*Klik menu '''<code>Delete</code>'''
[[Berkas:JC delete menu.png|nirbing|500x500px]]
|}
|}
=='''Pelaporan Kendala dan Support'''==
=='''Pelaporan Kendala dan Support'''==

Revisi terkini sejak 18 Desember 2024 07.50

OpenMX Logo.png

OpenMX adalah software package untuk simulasi material skala nano berdasarkan DFT (Density Functional Theories), norm-conserving pseudopotensials, dan pseudo-atomic localized basis functinons. OpenMX merupakan software tidak berbayar dengan lisensi GNU GPLv3.

Modul OpenMX

Berikut adalah detail versi OpenMX yang tersedia secara global di ALELEON Supercomputer:

Modul OpenMX
Versi Nama modul Modul

DEFAULT

Dukungan hardware
CPU GPU OMP

Threading

MPI

multi-node

3.9.9 openmx/3.9.9-GCC11.3-AOCL4.0 V V - V V

DATA.PATH pada File Input

User wajib mendefinisikan DATA.PATH berikut pada file input supaya OpenMX dapat berjalan. Daftar DATA.PATH per versi OpenMX lihat tabel di bawah.

DATA.PATH        [data-path-OpenMX]
Daftar DATA.PATH OpenMX
Versi DATA.PATH
3.9.9 /comp/openmx/3.9.9-GCC11.3-AOCL4.0/DFT_DATA19

Pilihan MPI atau Threading OpenMP untuk Menjalankan OpenMX

OpenMX di ALELEON Supercomputer dapat berjalan melalui paralelisasi MPI, OpenMP (OMP), atau keduanya (hybrid MPI/OMP) untuk menggunakan multi-core CPU dan multi-node. Admin menyerahkan keputusan kepada user untuk memilih metode paralelisasi melalui parameter Submit Script berikut:

  • Penjelasan submit script lihat subbab berikutnya (Pilihan Menjalankan Komputasi).
  • SBATCH ntasks mewakili jumlah task MPI sedangkan SBATCH cpus-per-task mewakili jumlah thread OMP.
#SBATCH --ntasks -> mewakili jumlah task MPI
#SBATCH --cpus-per-task -> mewakili jumlah thread OpenMP
  • Apabila ingin MPI saja, isi jumlah SBATCH cpus-per-task dengan 1:
# Pure MPI 
#SBATCH --ntasks=[isi-sesuai-keinginan]
#SBATCH --cpus-per-task=1
  • Apabila ingin Hybrid MPI/OMP, isi kedua parameter tersebut:
    • Total core CPU yang digunakan adalah ntasks * cpus-per-task.
    • Contoh menggunakan 2 proses MPI dan 4 thread OMP per MPI sehingga total menggunakan 8 core CPU:
# Hybrid MPI/OMP, contoh dengan 2 proses MPI dan 4 thread OMP per MPI.
#SBATCH --ntasks=2
#SBATCH --cpus-per-task=4
  • Apabila ingin OMP saja, isi jumlah ntasks dengan 1:
# Pure OMP 
#SBATCH --ntasks=1
#SBATCH --cpus-per-task=[isi-sesuai-keinginan]

Metode Menjalankan Komputasi

User dapat menjalankan OpenMX dengan pilihan metode:

Batch Job

Menjalankan komputasi di compute node melalui manajemen Slurm kemudian user menunggu hingga selesai. Terdapat dua opsi tampilan yang dapat dipilih sesuai preferensi user: (klik expand atau kembangkan)

Langkah Job Submission Slurm di Terminal

Sbatch terminal display rev2.png

1
Login SSH ke ALELEON Supercomputer.
2
Siapkan file komputasi yang dibutuhkan.
  • Perhatikan DATA.PATH pada file input.
  • User dapat upload / download file dengan software FTP.
3A
Buat Submit Script yaitu 'formulir' untuk menjalankan job komputasi.
  • Nama file bebas dengan format .sh, contoh submit.sh
Contoh template Submit Script, ikuti petunjuk NOTES didalamnya.
  • Klik expand / kembangkan
Template Submit Script OpenMX
#!/bin/bash

# -----------------------------------------------------
# Template SLURM Submit Script
# OpenMX | rev.080124
# 
# NOTES: 
# 1. Isi bagian yang ditandai 4 garing (////).
# 2. Template ini bersifat referensi.
#    User dapat mengubah bagian yang perlu diubah.
# 3. Perhatikan rate CCH = ntasks * cpus-per-task.
# -----------------------------------------------------

# -----------------------------------------------------
# Alokasi komputasi SBATCH, input, dan module
# -----------------------------------------------------

# Alokasi jumlah core thread CPU, mewakili jumlah task MPI
#SBATCH --ntasks=////

# Alokasi jumlah thread OMP per task MPI
#SBATCH --cpus-per-task=////

# Alokasi jumlah memori RAM (satuan GB)
#SBATCH --mem=////GB

# Alokasi limit waktu menjalankan job
# Format HH:MM:SS atau D-HH:MM:SS
#SBATCH --time=////

# Definisi file untuk menampung output terminal program
#SBATCH --output=result-%j.txt

# Definisi file untuk menampung output error log    
#SBATCH --error=error-%j.txt 

# Nama input file OpenMX yang dijalankan
INPUT_FILE='////.dat'

# Memuat modul software OpenMX
# Daftar modul lihat subbab "Modul OpenMX" di atas 
module load openmx////

# ----------------------------------------------------
# Script jalannya program
# ----------------------------------------------------

# Definisi threading OMP 
export OMP_NUM_THREADS=${SLURM_CPUS_PER_TASK}

# Perintah menjakankan OpenMX
mpirun -np ${SLURM_NTASKS} openmx ${INPUT_FILE}
  • Untuk SBATCH notifikasi email status jalannya job lihat Slurm Jojo.
3B
SBATCH komputasi (ntasks, mem, time, dll) mempunyai limit berdasarkan:
  • Sisa Core Hour user dan Fair Usage Limit.
  • Spesifikasi sistem dan software komputasi.

Untuk melihat limit, jalankan perintah berikut:

$ slimit-hympi 
4
Jalankan job komputasi dengan perintah:
$ sbatch [nama-submit-script]

Contoh:
$ sbatch submit.sh
5
User dapat melihat status jalannya job dengan perintah:

$ squeue -ul $USER

Kolom ST atau STATE menunjukkan status jalannya job.
STATE Penjelasan
R (RUN) Job berjalan
PD (PENDING) Job tertahan, lihat NODELIST(REASON)
CG (COMPLETING) Job selesai dan dalam proses clean-up
CA (CANCELED) Job dibatalkan user
PR (PREEMPETED) Job dibatalkan admin, alasan dikabarkan via email
S (SUSPENDED) Job ditahan admin, alasan dikabarkan via email
Apabila user ingin menghentikan job yang berjalan, jalankan perintah:
$ scancel [job-ID]

Job ID ada pada squeue diatas.
contoh membatalkan job ID 231:
$ scancel 231 
Langkah Job Submission Slurm di Web EFIRO

Efiro jobcomposer display.png

1
Login ke web EFIRO ALELEON Supercomputer.
2
New Pinnedapps jc.pngBuka pinned apps Job Composer di homepage EFIRO.

Pilih menu New Job -> From Template

Jcnewjobmarked.png

3
Pilih template OpenMX yang diinginkan:
Nama Template Penjelasan
OpenMX 3.9.9 Menjalankan OpenMX 3.9.9
Kemudian Isi Job Name dan klik Create New Job

Jctemplate-2.png

4
Siapkan file komputasi yang dibutuhkan:
  • Upload file melalui menu Edit Files
  • Perhatikan DATA.PATH pada file input.

JC job menu.png

5A
Lengkapi Submit Script melalui tombol Open Editor.

  • Submit script adalah 'formulir' untuk menjalankan job komputasi.
  • Ikuti petunjuk NOTES didalamnya
  • Klik Save setiap kali mengubah script.
5B
SBATCH komputasi (ntasks, mem, time, dll) mempunyai limit berdasarkan:
  • Sisa Core Hour user dan Fair Usage Limit.
  • Spesifikasi sistem dan software komputasi.

Untuk melihat limit, jalankan perintah berikut pada terminal:

$ slimit-hympi
6
Jalankan job dengan klik tombol Submit.
  • Pantau kolom status yang menjelaskan status jalannya job.
  • Apabila ingin membatalkan job yang berjalan, klik Stop.

Daftar status job
Status Arti
Not Submitted Job belum pernah dijalankan.
Running Job berjalan.
Queue Job mengantri dan belum berjalan.
Completed Job selesai berjalan.
Failed Job berhenti karena error atau di stop user.
Untuk melihat alasan job yang queue:
Buka pinned apps Active Jobs di homepage EFIRO. Ubah opsi All jobs ke Your Jobs. Klik simbol > untuk melihat status job yang pending pada kolom Reason. Arti reason lihat laman Daftar Reason NODELIST ALELEON Supercomputer.
7
Lihat output file komputasi pada kolom Folder Contents
  • Atau dengan membuka Edit Files
Kolom Folder Contents.
8
Untuk menghapus ruang job dan datanya:
  • Pilih ruang job yang akan dihapus.
  • Klik menu Delete

JC delete menu.png

Pelaporan Kendala dan Support

Apabila menjumpai masalah teknis dalam menjalankan komputasi, silahkan lapor dengan klik gambar berikut ini.

Wiki-pelaporankendala.jpg

---

Bila terdapat pertanyaan lainnya, silahkan hubungi admin EFISON melalui email:

support@efisonlt.com